出 版 侈 明 


MATLAB 是 当今 最 优秀 的 科技 应 用 软件 之 一 ， 它 以 强人 的 科学 计算 与 可 视 化 功能 、 
简单 易 用 、 开 放 式 可 扩展 环境 ,特别 是 所 附带 的 30 多 种 面向 不 同 领域 的 土 共 箱 支持 ， 使 得 
它 在 许多 科学 领域 中 成 为 计算 机 辅助 设计 和 和 分析、 算法 研究 和 应 用 开发 的 基本 工具 和 首选 
平台 ， 

MATLAB 具有 其 他 高 级 语言 难以 比拟 的 一 些 优 点 ， 如 编写 简单 、 编 程 效 雍 向 、 易 学 
易 民 等， 因此 MAILAB 语言 也 被 通俗 地 称 为 演算 纸 式 科学 算法 语言 。 在 控制 、 通 信 、 人 和信 
号 处 理 及 科学 计算 等 领域 中 , MATLAB 都 被 广 证 地 应 用 , 已 经 被 认可 为 能 够 有 效 提高 工作 
效率 、 改 善 证 计 手 段 的 工具 软件 ， 学 握 了 MATLAB 就 好 比 掌握 了 开启 这 些 专 业 锦 盛大 门 
的 钥匙 。 

MATLAB 是 从 事 众 多 工业 、 科 研 领 域 的 必 备 工具 。 无 论 是 在 校 学 牛 ， 述 是 已 经 参加 
工作 的 工程 技术 人 员 和 科研 人 员 ， 都 非常 渴望 快速 学 习 MATILAB 并 熟练 运用 它 来 解决 各 
种 科学 问题 、 工 程 问题 。 非 常 懿 的 是 ， 目 前 市 场 上 很 难 找到 -- 僚 能 够 从 入 门 到 精通 快速 
学 握 该 软件 的 最 新 学 习 资 料 ， 致 使 使 用 者 在 学 习 中 通 到 了 实际 问题 而 难以 解决 。 有 时 然 
MATLAB 软件 本 身 具 有 -- 定 的 帮助 功能 , 但 是 它们 阅读 起 来 并 不 方便 ,而且 某 些 重 要 的 概 
念 没有 给 予 详细 的 解释 和 说 明 ， 应 用 举例 也 人 往 少 ， 使 用 者 难以 快速 掌握 它 。 

这 套 丛 书 的 推出 ， 将 在 MATLAB 新 版 本 软件 和 使 用 者 之 间架 起 一 座 桥 梁 ， 让 国内 的 
工程 技术 人 员 无 需 花 费 太 客 的 时 间 和 精力 ， 就 能 尽快 掌握 该 软件 及 它 的 一 些 新 特性 和 新 巧 
能 ， 并 通过 人 量 的 实例 告诉 使 用 者 如 何 解决 面 奖 的 实际 问题 

本 爸 从 书 首 批 将 推出 5 种 图 书 ， 简 介 如 下 ; 


MATLAB ?7 基础 与 提高 


全 面 系 经 地 介绍 了 MATLAB 7 这 个 功能 强大 的 软件 . 首先 详细 计 解 了 MATLAB 数 
值 运算 ， 符 号 和 运算、 程序 设计 初步 和 基本 终 图 功能 ; 然后 举 出 了 很 多 应 用 实例 ， 冒 在 通 
过 实 枉 操作 巩 国学 习 前 面 所 介绍 的 知识 ; 最 后 讲述 了 MATLAB 的 高 级 部 分 ， 包 括 GUI 
界面 设计 ，Simulink、MNoetbook、 几 种 常用 的 工具 箱 ， 以 及 外 部 程序 接口 知识 等 。 
小 波 分 析 理 论 与 MATLAB 了 实 规 

以 最 新 推出 的 小 波 分 析 工 具 荐 Wavelet Toelbox 30 版 本 为 基础 。 全书 共 分 为 三 太 部 
分 ， 第 工 部 分 着 重 介 绍 了 小 波 理 论 基 础 ， 包 括 小 波 基 础 知识 、 连续 小 玻 变 换 ， 离 艇 小 波 
变 找 、 多 分 办 率 分 析 与 正 交 小 波 变 换 . 小 波 变 换 和 多 采样 滤波 器 组 、- 二 锥 小 玻 变 换 与 图 
像 处 理 到 小 波 包 的 基本 原理 等 ; 第 2 部 分 重点 说 明了 小 波 分 析 工 具 箱 的 详细 司 用 方法 ， 
包 揪 展 形 用 户 拉 口 、 小 波 适 用 函数 ， 一 维 小 波 变 换 的 MATLAB 实现 、 二 维 小 波 变 接 的 
MATLAB 实现 . 小波 包 变换 的 MATLAB 实现 .信号 和 图 像 的 降 唆 和 压缩 ， 以 及 最 新 的 
信和 号 和 图 像 的 提升 小 法 变换 等 内 容 ; 第 3 部 分 主要 介绍 了 小 波 工 具 箱 的 应 用 基础 ， 以 及 
| 小 波 雪 换 在 语音 和 生物 医学 信 生 处 理 中 、 故 障 诊断 中 ， 数 字 水 印 中 的 应 用 方法 。 








































MATLAB 7 转 助 控制 系统 设计 与 仿 误 
通过 介绍 MATLABS ?7 坟 件 及 其 控制 系统 工具 箱 的 使 用 方法 ， 并 结合 控制 系统 的 设 
计 流 程 及 实际 应 用 , 全面 系统 地 介绍 了 控制 系统 设计 与 仿真 的 全 过 程 . 全 书 肉 容 由 浅 入 
深 ， 以 工程 应 用 为 背景 ， 从 基础 知识 建 模 与 分 析 ， 设计 与 仿真 流程 三 个 方 面 对 控 制 系 
统 的 设计 与 仿真 进行 了 深入 的 说 明 ， 同 时 书 中 列举 大 量 实 例 ， 尽 量 贴 近 工 程 实际 ， 有 具有 
很 强 的 代表 性 ， 

系统 地 介绍 了 信号 与 系统 基础 知识 、 常 用 信号 寞 所、 离散 系 纸 结 构 ，IIR 数字 鸡 减 
器 设计 、FIR 数字 泪 波 器 设计 、 平 入 信号 分 析 ， 非 平稳 信 号 分 析 、 高 斯 司 导 分 析 及 信和 号 
处 理 的 GUI 实现 ， 其 中 ， 信 号 与 系统 基础 知识 包括 连续 信号 与 模型 、 离 散 信 和 号 与 宰 型 ; 
常用 信号 变 换 包 括 z 变换 .Chirp z 变换 ，FFT 变换、 DCT 变换 和 Hilbert 寞 找 等 ; 元 向 
系统 结构 包括 HR、EFIR 和 Lattice 结构 ; IIR 滤波 器 设计 包括 模拟 和 数字 低 通 、 高 通 ， 
带 通 与 带 阻 注 波 器 设计 ， 以 及 基于 冲 激 响应 不 变法 和 双 贱 性 变 捷 法 的 IER 滤波 路 设计 
等 ; FIR 滤波 器 设计 包括 基于 窗 函 救 . 频率 抽 料 法 和 切 比 雪夫 通 近 法 的 FIR 减 波 器 设计 ; 
平稳 信号 分 析 和 包括 经 典 动 率 谱 帖 计 , 基于 参数 檬 型 的 瑟 率 谱 估 计 和 基于 非 参数 模型 的 功 
率 谱 估计 ， 非 平稳 信号 分 析 和 包括 STFT 变换 、Gabor 展开 、Wigner-Ville 分 布 与 
Choi-Wiliamas 分 布 ; 非 训 斯 信号 分 析 包 括 基于 非 参 数 法 的 双 谱 估计 ， 基 于 素 数 模型 的 到 | ， 
谱 舍 计 ， 以 及 双 谱 估 计 的 应 用 ; 习 叶 处 理 的 GUI 实现 包括 滤波 器 设计 与 分 析 的 FDATpol 
工具 和 湾 波 器 设计 与 司 号 分 析 的 SPToel 工商 。 
神经 网 络 理论 与 MAILAS 7 实现 

以 最 新 推出 的 神经 网 络 工 具 籍 403 版 本 为 基础 本 书 前 两 章 介 绍 了 MATLAB 7 和 
神经 网 络 的 基 碳 知识 ， 对 神经 网 络 工具 籍 的 重要 范 数 分 门 别 类 地 进行 了 详细 介绍 ， 并 给 
出 了 完整 的 示例 。 从 第 3 章 到 第 5 章 ， 分 别 介绍 了 凡 种 比较 重要 的 神经 网 络 类 型 ， 包 撕 
感 直 器， 线性 网 络 和 BP 网 络 等 ， 并 介绍 了 这 些 网 络 的 结 枸 及 学 习 站 法 ， 以 及 MAILAB 
的 实现 方法 。 第 各 章 介 绍 了 神经 网 络 的 图 形 用 户 界面 . 后 5 章 分 别 讲 述 了 如 何 利用 神经 
网 阁 工 具 箱 解 决 控制 ， 故 障 诊断 、 预 测 和 有 源 消 声 等 应 用 领域 中 的 实际 问题 . 
































总 之 ， 这 套 书 涵盖 了 MAILAB 使 用 基础 、 高 级 编程 和 重要 领域 的 应 用 ， 相 信 这 套 欠 书 
的 推出 ， 将 为 MATLAB 工 程 技术 人 员 提 供 最 权威 最 系统 的 知识 参考 ， 帮 助 他 们 快速 解决 学 
习 、 科 研 和 工程 实际 中 面临 的 问题 
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玫 言 


白 上 世纪 80 年 代 末 以 来 , 神经 网 络 这 个 涉及 客 种 学 科 的 新 的 高 科技 领域 , 吸引 了 众多 
的 神经 生理 学 家 、 心 理学 家 、 数 理 私 学 家 、 计 算 机 与 信息 科学 家 及 工程 师 和 企业 家 等 进行 
研究 和 应 用 。 大 量 的 有 关 神 经 网 络 机 理 、 模 型 、 算 法 特性 分 析 ， 以 及 在 各 领域 应 用 的 学 术 
论文 像 雨 后 春 等 般 在 报刊 杂志 .上 和 许多 国际 学 术 会 议 中 涌现 。 神 经 网 络 日 益 威 为 当代 商科 
技 领域 中 方兴未艾 的 竞争 热点 。 

MATLAB 是 一 款 强 大 的 工程 计算 和 仿真 软件 ， 刚 刚 发 布 的 R14 产品 族 比 以 往 任 何 版 
本 都 更 加 强大 ， 其 中 的 神经 网 络 功能 提供 了 大 量 可 直接 调用 的 函数 和 命令 ， 基 本 上 春 括 了 
目前 点 用 比较 成 熟 的 神经 网 络 设计 方法 。 用 MATLAB 来 编写 各 种 网 络 谨 计 与 训练 的 子 程 
序 ， 可 以 使 用 户 从 繁琐 的 编程 中 解脱 出 来 ， 大 大 提高 工作 效率 和 解 题 质量 。 困 此， 如 何 谍 
用 神经 网 络 工具 箱 函 数 来 解决 工程 实 虐 中 的 问题 已 成 为 燃眉之急 。 我 们 根据 自身 多 年 来 从 
事 神经 网 络 系统 设计 和 MATLAB 使 用 的 经 验 编写 了 本 节 。 除了 详细 介绍 各 个 工具 箱 纹 北 
之 外 ， 还 者 重 讲解 了 利用 MATLAB 进行 神经 网 络 系统 分 析 与 设计 的 大 量 实例 。 

本 书 是 介绍 应 用 MATLAB 软件 RI4 版 本 进行 神经 网 络 设 计 和 应 用 的 最 新 书 和 糙 . 本 
前 两 章 介绍 了 MATLAB 7 和 神经 网 络 的 基础 知识 , 对 神经 网 络 荆 具 箱 的 重要 函数 分 门 别 类 
地 进行 了 详细 介绍 ， 并 给 出 了 完整 的 示例 。 从 第 3 章 到 第 $ 章 ， 分 别 介绍 了 几 种 比较 重要 
的 神经 网 络 类 型 ， 所 括 感知 器 、 线 性 网 络 和 BP 网 络 等 ， 并 介绍 了 这 些 阿 络 的 结构 及 学 习 
算法 ， 以 及 MATLAB 的 实现 方法 。 第 6 章 介绍 了 神经 网 络 的 图 形 用 户 界 面 。 后 5 章 分 别 
讲述 了 如 何 利 用 神经 网 络 工 具 箱 解决 控制 、 故 障 诊断 、 预 测 和 有 源 消 声 等 应 用 领域 由 的 实 
际 问 题 。 

全 书 通 过 大 量 的 MATLAB 实例 为 读者 讲述 了 神经 网 络 的 MATLABH 实现 方法 , 形象 生 
动 ， 图 文 并 茂 ， 深 入 浅 出 ， 防 络 清晰 ， 可 读 性 强 。 相 信 广 大 渎 者 通过 认真 学 习 本 书 ， 可 以 
快速 学 会 神经 了 网络 技术 和 MATLAB 实现 方法 ， 并 建立 牢固 的 知识 基础 ， 真 正 敌 到 “ 事 半 
功 倍 ”， 起 到 课堂 上 无 法 达到 的 学 习 效果 。 

本 书 由 飞 思 科技 产品 研发 中 心 策 划 并 组 织 编写 ， 孙 志 强 、 葛 哲学 负责 全 书 的 统 稿 与 审 
校 工 作 。 孙 志 强 、 摩 剑 利 、 张 娃 、 肖 俊 同 志 负 责 本 书 第 1 章 到 第 5 章 的 编号; 葛 哲 学 、 扼 
下、 安 卫 华 、 杨 勇 等 负责 本 书 第 6、7、95、10 章 的 编写 刘 开 、 李 浩明 、 潘 葵 、 陈 仲 咎 负 
责 本 过 的 第 8 章 和 第 11 章 的 编写 。 此 外 ， 张 丽 娜 、 安 芝 、 和 孙 金 华 、 刘 美 琴 、 张 瑟 芒 、 谢 光 
军 、 朱 国 强 、 郭 玉 攻 、 财 慧 玲 、 工 盘 、 葛 诚 、 胡 雷 、 胡 邦 等 负责 书稿 的 材料 整理 和 测试 工 
作 ， 并 提供 了 大 量 的 帮助 与 意见 。 另 外 ， 还 有 很 多 同志 在 本 忆 的 编校 过 程 中 付出 了 大 量 的 
劳动 ,在 此 - -并 表示 圳 心 的 感谢 。 

本 书 可 作为 各 领域 工程 技术 人 员 的 参考 用 书 ， 也 可 作为 高 等 学 校 理工 类 各 专业 尚 年 级 
本 科 生 和 研究 生 的 神经 网 络 课程 的 教材 ， 还 可 作为 其 他 科技 工作 者 应 用 神经 网 络 的 参考 资 
料 。 

由 于 时 间 仓 促 加 之 作者 本 身 水 平 有 限 ， 书 中 错误 之 处 在 所 难免 。 在 此 ， 敬 请 各 领域 专 
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家 和 广 人 读者 批评 指正 。 
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第 1 章 概 述 


本 章 主要 介绍 了 MAITLAB 和 神经 网 络 的 一 些 基 础 知识 。 首 先 介绍 了 MATLAB ?了 及 其 
神经 网 络 工具 箱 的 知识 ， 这 里 介绍 的 知识 在 以 后 的 几 章 中 都 会 用 到 ， 是 基于 MATLAB ? 进 
行 神 纾 网 络 分 析 、 设 计 与 实现 工作 的 知识 基础 。 对 于 神经 网 络 ， 本 章 从 神经 网 络 的 产生 、 
发 展 ， 神 经 网 阁 模型 的 建立 ， 以 及 人 工 神经 网 络 等 方面 进行 了 概括 性 的 说 明 ， 使 读者 对 神 
经 网 络 有 个 初步 的 认识 。 

本 章 主 要 内 容 ， 

量 MATLAB 语言 简介 

昌 MATLAB 快速 入 门 

理 ”和 神 经 网 络 发 展 史 





1.1 MATLAB 语言 简介 


1.1.1 MATLAB 概述 


MATLAB 诞生 于 20 世纪 70 年 代 ， 它 的 编写 者 是 Cleve Meler 博士 和 他 的 同事 。 当 时 ， 
他 们 利用 Foriran 开发 了 两 个 子 程序 库 - 一 -EISPACK 和 LINPACK。 这 两 个 子 程序 库 是 求解 
线性 方程 的 程序 库 。 介 是 ，Cleve Moler 发 现 学 生 使 用 这 两 个 程序 库 育 困难 ， 主 要 问题 是 邱 
为 接口 程序 不 好 写 , 很 费时 间 , 于 是 , Cleve Moler 自己 动手 , 在 业余 时 间 里 编写 了 EISPACK 
和 LINPACK 的 接口 程序 .Cleve Moler 给 这 个 接口 程序 取 名 为 MATLAB , 意 为 和 阵 (Matrix ) 
和 实验 室 〈Laboratory) 的 组 合 。 以 后 几 年 ，MATLAB 作为 免费 软件 在 大 学 时 被 广泛 使 用 ， 
深 受 大 学 生 的 喜爱 。 

1984 年 ，Cleve Moler 和 John Little 成 立 了 MathWorks 公司 ， 正 式 把 MATLAB 扒 间 市 
场 ， 基 炙 续 进行 MATLAB 的 开发 。1993 年 ，MathWorks 公司 推出 MATLAB 4.0;，1995 年 ， 
MathWorks 公司 推出 MATLAB 4.2C 版 (For Win3.x)，1997 年 ， 推 出 MATLAB 5.0，2000 
年 10 有 日 ，MathWaorks 公司 推出 MATLAB 60:， 2002 年 8 月 ,发布 了 MATILAB 6.5，2004 
年 9 月 发 布 了 最 新 版 本 的 MATILAB 7。 每 一 次 版 本 的 推出 都 使 MAILAB 有 了 长 足 的 进步 ， 
界面 越 来 越 友好 ， 内 容 越 来 越 丰富 ， 功 能 越 来 越 强大 ， 帮 助 系统 越 来 越 完善 。 

MATLAB 长 于 数值 计算 ， 能 处 理 大 量 的 数据 ， 而 且 效 率 比 较 高 ， MathWorks 公司 在 此 
基础 上 加 强 了 _ MAILAB 的 符号 计算 、 文 字 处 理 、 可 视 化 建 模 和 实时 控制 能 力 ， 增 强 了 
MATILAE 的 让 场 竞争 力 ， 使 MATLAB 成 为 了 市 场 主流 的 数值 计算 软件 。 

MATLAB 产品 族 是 支持 从 概念 设计 、 算 法 开发 、 建 模仿 真 到 实时 实现 的 理想 的 集成 环 
境 。 无 论 是 进行 科学 研究 还 是 产品 开发 ，MATLABH 产品 族 都 是 必 不 可 少 的 工具 。 





上 ， 
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MATLAB 的 应 用 领域 





MATLAEB 产品 族 可 用 于 以 下 领域 : 


数据 分 析 
数值 和 符 扎 计算 
工程 与 科学 绘图 
控制 系统 设计 
数字 图 像 信 号 处 理 
财务 工作 

建 横 、 仿 走 、 原 型 开发 
图 形 用 户 界 而 设计 等 


MATLAE 产品 族 被 广泛 地 应 用 于 包括 信号 与 图 像 处 理 、 控 制 系 统 设 计 、 系 统 仿真 等 
诸多 领域 。 开 放 式 的 结构 使 MATLAB 产品 族 很 容易 针对 特定 的 需求 进行 扩充 ， 从 而 在 不 
靳 深化 对 问题 的 认识 的 同时 ， 提 高 自身 的 竞争 力 。 

MATLAB 产品 族 的 一 大 特性 是 在 众多 的 面向 具体 应 用 的 工具 箱 和 仿真 模块 , 包含 了 完 
整 的 函数 集 ， 用 来 对 信和 号 与 图 像 处 理 ， 控 制 系统 设计 、 神 经 网 络 等 特殊 应 用 进行 分 析 和 设 
计 。 回 时 , 其 他 的 产品 也 延伸 了 MATLAHB 的 能 力 , 包 括 数据 采集 .报告 生成 和 依靠 MATLAB 
语 癌 妨 程 产生 犯 立 的 CAC++ 代 码 等 。 

2，、MATLAEB 的 产品 构成 

MATLAB 主要 产品 有 : 

















MATLAB: 所 有 MathwWorks 公司 产品 的 数值 分 析 和 图 形 基础 环境 。MATLAB 将 
2D 和 3D 图 形 、MATLAB 语言 编程 集成 双 一 个 单 -的 、 易 学 易 用 的 环境 之 中 。 
MATLAB Toolbox:， 一 系 列 专 用 的 MATLAE 顺 数 床 ， 用 于 解 诀 特定 领域 的 问题 。 
工具 逢 是 开 族 的、 可 扩展 的 ， 可 以 查看 其 中 的 算法 或 开发 自己 的 算法 。 

MATLAB Compiler:， 将 MATLAB 闭 言 编写 的 M 文件 自动 转换 成 C 或 C++ 文件 ， 
专 持 用 户 进行 独立 的 应 用 开发 。 结 合 Mathworks 提供 的 CIC++ 数 学 库 和 图 形 库 ， 
开户 可 以 利用 MATLAHE 快速 地 开发 出 功能 强大 的 独立 应 用 系统 。 

Simulink:， 是 结合 了 框图 异 面 和 交互 仿真 能 力 的 非 线性 动态 系统 仿真 工具 。 它 以 
MATLAB 的 数学 、 图 形 和 语言 为 基础 。 

Stateflow， 与 Simuiink 框图 模型 相 结合， 描述 复杂 事件 驱动 系统 的 逻辑 行为 ， 驱 
动 系统 可 以 在 不 同 的 模式 之 间 进 行 切 换 。 

ResalTime Workshop: 直接 从 Simulink 框图 自动 生成 C 或 Ada 代码 ， 用 于 实现 快 
速 原 型 和 硬件 的 仿 足 ， 整 个 代码 的 生成 可 以 根据 需要 完全 定制 。 

Simulink Blockset: 专门 为 特定 领域 设计 的 Simulink 功能 模块 的 集合 , 用 上 户 也 可 以 
利用 已 有 的 模块 或 自行 编写 的 如 和 MATLAB 程序 建立 自己 的 模块 。 











3， MATTAB 的 功能 

MATLAB 的 核心 是 一 个 基于 矩阵 运算 的 快速 解释 程序 , 它 交 五 式 地 接收 用 户 输入 的 各 
项 命令 ， 答 马 计 算 结 果 。MATILAS 提供 了 一 个 开放 式 的 集成 环境 ， 用 户 可 以 运行 系统 提供 
的 大 量 命令 , 包括 数值 计算 、 图 形 绘制 和 代码 编制 等 。 其 体 来 说 ，MATLAHB 具有 以 下 功能 ; 


人 


数据 可 视 化 功能 
矩阵 运算 功能 
人 量 的 工具 箱 
绘图 功能 
GUI 设计 
Simulink 仿 矢 
通过 运用 MATLAB 这 些 强大 的 功能 ， 工 程 师 、 科 研 人 员 、 数 学 家 和 教育 工作 者 可 以 在 
统一 的 平台 下 完成 相应 的 科学 计算 工作 。 这 些 工作 涉及 到 的 领域 非常 广泛 ， 例 如 汽车 、 电 
子 、 仅 器 仪表 和 通讯 等 。 
MathWerks 公司 刚刚 推出 了 MATLAB R14 版 本 产品 , 即 MATLAB 7, 主要 包括 12 个 
新 产品 模 志 ， 同 时 还 升级 了 28 个 产 遇 模块。 


人 下 和 





1.1.2 MATLAB 语言 特点 


MATLAB 语言 有 不 同 于 其 他 高 级 语音 的 特点 ， 它 被 称 为 第 由 代 计 算 机 语言 。 如 同 第 三 
代 计 算 机 语言 (如 Eortran 语言 、C 语言 等 ) 使 人 们 摆 脐 了 对 计算 机 硬件 的 依赖 一 样 ， 第 四 
代 语 言 MATLAB 使 人 们 从 繁琐 的 程序 代码 中 解放 了 出 来 . 它 丰 富 的 羡 数 库 使 开发 者 省 去 了 
大 量 的 重复 编 穆 。MATLAB 语言 最 大 的 特点 就 是 简单 和 快捷 。 


1， 编 程 效率 高 

MATLAB 是 一 种 面向 科学 与 工程 计算 的 高 级 语言 ， 允 许 用 数学 形式 的 语言 来 编号 程 
序 ， 比 Basic、Fortan 和 C 等 语言 更 加 接近 我 们 书写 计算 公式 的 思维 方式 ， 用 MATLAB 编 
写 程序 狐 如 在 演算 纸 上 排 列 出 公式 与 求解 问题 -- 样 。 因此 ，MATLAB 语言 也 可 以 通俗 地 称 
为 “ 淄 算 纸 ” 式 科学 算法 语言 ， 上 是 由 于 它 编写 简 单 ， 所 以 编程 效率 贡 ， 昂 学 易 懂 ， 

2， 用 户 使 用 方便 

MATLAB 语言 是 -种 解释 执行 的 语言 《在 没 被 专门 的 工具 编 诺 之 前 )， 世 灵活 、 方 便 ， 
调试 手段 丰富 ， 调 试 速度 快 。 大 们 用 任何 -- 种 语言 编写 程序 和 调试 程序 一 般 孝 要 经 过 4 个 
步 邓 : 编辑 、 编 详 、 连 接 ， 以 及 执行 和 调试 。 各 个 步骤 之 间 是 顺序 关系 ， 编 程 的 过 程 就 是 
在 它们 之 问 做 瀑布 型 的 循环 。MATLAEB 语言 与 其 他 语言 相 比 ， 把 编辑 、 编 译 、 连 接 和 执行 
如 为 一 体 。 它 能 在 同一 界面 上 进行 灵活 拘 作 ， 人 快速 排除 输入 程序 中 的 书写 错误 、 语 法 错误 ， 
甚至 语义 错误 ， 从 而 加快 了 开发 者 编号、 修改 和 调试 程序 的 速度 ， 可 以 说 ， 在 编程 和 调试 
过 程 中 它 是 一 种 比 Wisual Basic 还 要 简单 的 语言 。 
具体 地 说 ， 在 运行 MATLAB 时 ， 如 果 折 接 在 命令 行 输入 MATILAB 语句 《命令 )， 包 
括 调用 M 文件 的 语 凶 ， 短 输入 -条 语句 ， 就 会 立即 对 其 进行 处 理 ， 完 成 编译 、 连 接 利 运行 
的 全 过 程 。 又 如 ， 将 MATLAB 源 程 序 编辑 为 M 文件 时 ， 由 于 MATLAB 磁 站 文件 也 是 M 
文件 ， 所 以 编辑 后 的 并 文 件 就 可 直接 运行 ， 而 不 需要 进行 编译 和 连接 。 在 运行 M 文件 时 ， 
如 果 丰 错误， 计算 机 屏幕 上 就 会 给 出 洋 细 的 出 错 信息 ， 使 它 经 过 修改 后 再 执行 ， 直 到 正确 
为 止 。 所 以 ，MATLAB 语言 不 仅 是 一 种 语言 ， 广 义 上 更 可 以 称 为 一 种 语言 开发 系统 、 语 言 
调试 系统 。 
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3， 扩 充 能 力 强 ， 交 互 性 好 

高 版 本 的 MAITLAB 语言 拥有 丰富 的 库 函 数 ， 在 进行 复杂 的 数学 运算 时 可 以 交接 调用 ， 
而 且 MAILAB 的 库 函 数 同 用 户 文 件 在 形成 方式 上 一 样 ,所 以 用 户 文件 也 可 以 作为 MATLAB 
的 库 函 数 被 调用 。 因 和 而， 开发 者 可 以 根据 自己 的 需要 方便 地 建立 和 扩充 新 的 库 函 数 ， 以 便 
提高 MATLAB 的 使 用 效率 和 扩充 它 的 功能 。 另 外 ， 为 了 充分 利用 Fortran、C 等 语言 的 资 
源 ， 包括 开发 者 已 经 编辑 好 的 Fortran 、C 语言 等 程序 ， 可 以 通过 建立 Me 文件 的 形式 ， 进 
行 混合 编程 ， 方 便 地 调用 有 关 的 子 程序 ， 还 可 以 在 C 语言 和 Fortran 语言 中 方便 地 使 用 
MAILAB 的 数值 计算 功能 ， 这 些 良好 的 交互 性 使 程序 员 可 以 使 用 以 前 编写 过 的 程序 ， 减 少 
重复 性 工作 ， 也 使 编写 的 程序 具有 可 重复 利用 的 价值 。 


4， 称 植 性 很 好 ， 开 放 性 很 好 

MAILAB 是 用 妆 语 言 编 写 的 ， 而 己 语言 的 可 移植 性 很 好 。 于 是 ，MAILAB 可 以 很 方 
便 地 被 移植 到 能 运行 习 语言 的 操作 平台 上 。MATLAB 适合 的 工作 平台 有 Windows 系列 、 
UNIX、Linux、VMS 6.1 和 PowerMac。 除 了 内 部 函数 外 ，MAILAB 所 有 的 核心 文件 和 工 
具 箱 文件 都 是 公开 的 ， 都 是 可 读 可 写 的 源 文件 ， 用 户 可 以 通过 对 源 文 件 的 修改 和 自己 编程 
构成 新 的 工具 箱 。 

5、 语 名 简单， 内涵 丰 富 

MATLAB 请 言 中 最 基本 最 重要 的 成 分 是 函数 , 其 一 般 形式 为 Ta6c…']= funtde 人 
即 一 个 函 散 由 函数 名 、 和 输入 变量 de… 和 输出 变量 ab,c,… 组 成 。 同 一 函数 名 F、 不 同 数 目 
的 输入 变量 (包括 无 输入 变量 ) 及 不 同 数目 的 输出 变量 ， 代 表 着 不 同 的 例 义 《有 点 像 面 向 
对 象 中 的 多 态 性 )。 这 不 仅 使 MAITLAB 的 库 函 数 功 能 更 丰富 ， 而 且 大 大 减少 了 需要 的 磁 辈 
空间 ， 使 得 MAILAB 编写 的 M 文件 简单 、 短 小 而 高 效 。 


6， 高 效 方便 的 和 拢 阵 和 数组 运算 

MATLAB 语言 像 Basic、Fortran 和 CC 语言 一 样 规 定 了 矩阵 的 算术 运算 符 、 关系 运算 符 、 
运 辑 运算 符 、 条 件 运算 符 及 赋值 运算 特 ， 而 且 这 些 运 算 符 大 部 分 可 以 原 娃 不 动 地 照搬 到 数 
组 间 的 运算 中 ， 有 些 如 算术 运算 符 只 要 增加 “ ”就 可 用 于 数组 间 的 运算 。 另 外 ， 它 不 需要 
定义 数组 的 维 数 ， 只 需 给 出 乍 阵 函数 、 特 殊 矩 阵 专门 的 库 范 数 ， 使 之 在 求解 诸如 信和 号 处 理 、 
建 模 、 系 统 识别 、 控 制 、 优 化 等 领域 的 问题 时 ， 显 得 更 加 简捷 、 高 效 ， 这 是 其 他 高 级 语言 
所 不 能 比拟 的 。 在 此 基础 上 , 高 版 本 的 MATLAB 已 逐步 扩展 到 科学 及 工程 计算 的 其 他 领域 。 
因此 ， 不 和 久 的 将 来 ， 它 一 定 能 名 副 其 实地 成 为 “万 能 演算 纸 ” 式 的 科学 算法 语言 。 

7， 方 便 的 绘图 功能 

MATLAB 的 绘图 功能 是 十 分 方便 的 ， 它 有 一 系列 绘图 图 数 【 命 令 )， 例 如 线性 坐标 、 
对 数 灌 标 、 半 对 数 举 标 及 极 举 标 。 使 用 时 均 只 需 调 用 不 同 的 绘图 冰 数 〔 命 令 )， 在 图 上 标 出 
图 题 、Y7 轴 标 注 ， 格 〈 栅 ) 绘制 也 只 需 调 用 相应 的 命令 ， 简 单 易 行 。 另 外 ， 在 调用 绘图 函 
数 时 可 以 通过 调整 白 变量 终 出 不 变 颜 色 的 点 、 线 、 复 线 或 多 重 线 。 这 种 为 科学 研究 着 想 的 
设计 是 其 他 通用 的 编程 语言 所 不 及 的 。 
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1.1.3 MATLAB 7 的 安装 


MATLAB 7 支持 的 拘 作 系统 平台 有 : 
Windows 2000 (SP3 或 SP4) 
Windows NT4.0 《SPS 或 SP6) 
Windows 其 也 
Ljnux i86 2.4.x， glibc 2.2.5 
Sun Salaris 之 凡 ， 了 .9 
HPUX 11.0 和 11.1 
Miac OS X 10.3.2 

MATLAB 7 的 亡 装 程序 与 日 版 本 相 比 有 新 的 特点 ， 包 括 Typical (典型 ) 和 Custom ( 自 
定 尽 ) 安装 选项 及 新 的 放置 文档 的 方法 。 

(1) Typical 和 Custom 安装 方法 

Windows 平台 上 的 MATLAB 7 安装 程序 提供 了 两 种 安装 路 径 ， 即 “典型 ”安装 和 “ 自 
定义 ”安装 ， 

Typical 安装 是 一 种 最 简单 的 安装 方式 ， 这 种 方式 将 安装 所 有 得 到 许可 的 产品 ， 安 装 过 
程 不 会 显示 让 用 户 进行 选择 的 产品 的 清单 ， 一 般 情 况 下 所 有 产品 会 安装 在 一 个 软 认 的 旧 录 
下 ， 用 户 也 可 以 白 行 更 改 安装 上 日 录 。 

Custom 安装 方式 使 得 用 户 可 以 挝 择 自己 想 要 安装 的 产品 , 而 且 可 以 设置 其 他 九 种 安装 
选项 , 这 是 Typical 实 靶 方式 下 所 浇 有 的 。 比如 , 用 户 可 以 选 定 所 有 的 安装 文件 为 只 读 文件 。 

(2) 在 线 帮助 文档 的 安装 

MATLAB 7 安装 程序 经 玫 会 自动 安装 每 一 个 产品 的 在 线 HIML 文档 。 由 于 在 线 葡 档 以 
JAR 文件 的 压缩 格式 存 情 ， 因 此 它 比 以 前 的 版 本 占用 更 少 的 磁盘 存储 空间 。 另 外 ，MATLAB 7 
的 安装 胡 中 庶 有 PDF 文档 ， 用 户 可 以 到 该 站 点 上 下 载 : htm:wwwmathworks.cony 
aceessyhelbpdeskmhelpjhelpdesk,html]。 











1.1.4 MATLAB 7 的 新 特点 





2004 年 ，MatbWaorks 公司 发 布 了 MATLAB 的 最 新 版 本 产品 MATLAB 7。MAILAB ?7 
的 特点 在 于 其 具有 全 新 的 昔 面 及 各 种 林 同 领域 的 集成 工具 ， 更 易于 用 户 使 用 。 多 种 新 工具 
简化 了 许多 一 般 的 工作 ， 如 资料 输入 、 快 速 分 析 ， 创 造 高 品质 且 具 实用 性 的 图 表 分 析 等 。 
MATILAB 7 在 编程 和 和 代 担 效率 、 绘 图 各 可视化、 数学 运算 、 数 据 读 号 等 方面 有 了 很 大 改进 。 
上 其 新 的 特色 和 功能 加 强 包 插 以 下 3 个 方面 。 





(1)》 开发 环境 
皇上 以 重新 设计 桌面 ， 揭 容易 管理 多 个 文档 、 图 形 ， 能 够 保存 自 定 浆 的 窗 只 布局 ， 
以 及 设置 常用 命令 的 快捷 键 ; 


@ 增强 了 矩阵 编辑 器 和 工作 空间 浏览 器 ， 更 容易 察看 、 编 辑 和 显示 变量 ; 
旬 。M-Lint 代码 愉 验 器 对 代码 进行 修改 ， 以 使 性 能 和 可 维护 性 最 优 ; 
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生 能 亿 在 编辑 器 中 执行 M 代 玛 的 个 别 部 分 ， 

《2) 编程 

急 ”能 饱 生 成 区 寡 冰 数 ， 使 得 定义 和 调用 自 定 义 函 数 和 更 容易 ; 

章 。 提供 了 匿名 疯 数 ， 允 许 在 命令 行 或 脚本 语言 中 定义 单行 冰 数 ， 

鲁能 够 使 用 标准 的 语法 来 调用 函数 句柄 ， 而 不 是 feval; 

名 ”设置 答 件 断 点 ， 可 以 在 任何 表达 式 为 真 《True) 时 停止 代码 运行 。 

《3) 数学 运算 

急 。” 单 精度 的 数学 运算 、 线 性 代数 、FEFT 利 污 波 函数 ， 使 得 MATLAB 可 以 处 理 更 大 的 
单 精 度数 据 集 ; 

晶 “得 棒 ” 的 计算 几何 路 径 〈 使 用 Qhal 2002.1》， 更 能 控制 算法 选择 ， 

和 linsolve 呆 数 使 得 求解 线性 方程 更 快 ; 

量 ”OODE 求解 器 能 处 理 陷 人 性 微分 方程 及 多 点 边界 值 问题 。 

(4) 终 图 功能 

晶 ”新 的 绘图 接口 ， 可 以 在 不 进入 M 牧 码 下 交互 式 地 生成 和 编辑 周 形 ， 

@ 从 图 形 产 生 M 代码， 可 以 重用 自 定义 的 绘图 ， 

和 ”过 逝 的 图 形 注 释 ， 包 括 图 形 形 状 ， 对 象 排 列 等 ; 

鳃 ”能够 进行 各 种 名 形变 换 ， 比 如 旋转 、 平 移 等 。 

《5) 数据 读 写 和 外 部 接口 

和 新 的 文件 输入 /输出 函数 ， 能 够 读 非 常 大 的 任意 格式 的 文本 文件 ， 并 能 写 和 人 Excel 
和 HDFS 文件 ; 

昌 。” 厅 缩 的 MAT 文件 选项 ， 可 以 使 用 更 少 的 磁盘 空间 来 存储 大 的 数据 集 ; 

鲁 。 javaaddpath 本 数 可 以 在 不 重新 启动 MATLAB 下 动态 地 添加 ,移出 和 重新 载 入 Java 
类 ， 

硬 下 TP 对 象 可 以 连接 FTP 服务 器 ， 进 行 远 程 数 据 操作 ; 

电 ”支持 COM 自 定 文 接口 、 服 务 器 事件 和 Visual Basic 脚本 。 

(6) 性 能 和 平台 支持 

曲 JIT 加 速 器 涵盖 了 所 有 的 数据 类 型 和 国 数 调用 ， 

晶 JIT 加 速 器 产生 MMX 函数 ， 可 用 于 整数 运算 ， 

晶 ”任用 新 版 本 的 FFETW3 实现 FRT; 

急 。” 更 快 的 文本 文件 读 写 操作 。 


1.1.5S MATLAB 7 的 新 产品 及 更 新 产品 








1 新 产品 

MATLAB 7 在 保留 原 有 产品 的 基础 上 ， 增 加 了 许多 新 的 产品 。 
(1) MATLAB 新 产品 

龟 MATLAB PuildertorCOM 

晶 MATLAB Builder for Excel 





2) 新 的 工具 箱 


Bioinformatics Toolbox (和 牛 物 信息 科学 工具 箱 ) 

生物 信息 科学 十 具 箱 提供 了 一 个 集成 的 软件 计算 环境 ， 用 于 分 析 基 困 和 和 蛋白 

质 ， 主 要 特色 包括 ; 

a) 能 够 连接 网 络 数据 库 ; 

b) 可 以 读 和 转化 过 种 格式 的 数据 文件 ， 

c》 能 合计 算数 据 的 统计 特性 ， 

d) 能 够 利用 隐 马 尔 科 夫 模 型 对 生物 信号 序列 的 统计 模式 进行 建 模 。 
REFilter Design HDL Coder 〈 滤 波 器 设计 HDL 代码 年 成 器 ) 

小 波 器 疝 计 HDL 代码 生成 器 可 以 利用 MATLAB 和 滤波 器 工具 箱 来 设计 固定 
点 的 着 波 器 ， 它 能 生成 高 效 的 VHDL 或 WErilog 代码 ， 其 测试 平台 用 于 快速 仿真 、 
测试 和 检验 产生 的 滤波 器 代码 。 

Fixed-point Toclbox 〈 固 定点 工具 箱 ) 

尚 定点 工具 箱 为 MATLAB 担 供 了 固定 点 的 数据 类 卉 , 使 其 能 够 开发 男 定 点 的 

各 种 算法 ， 它 允许 生成 以 下 类 型 的 对 象 ; 

a) 和 ;定义 一 个 加 定点 的 数值 对 象 ， 

by fimath: 定义 下 对 银 的 数学 属性 ， 

c) fpref:， 定义 下 对象 的 瑰 实 属性 ， 

d) numerictype: 定义 和 对象 的 数据 类 型 和 尺度 属性， 

e)》 quantizer: 量化 数据 集 。 

Genetic Algorithm and Direet Search Toolbox 《遗传 算法 和 直接 搜索 工具 箱 ) 
遗传 算法 和 下 接 搜索 工具 箱包 含 了 一 系列 的 末 数 ， 它 扩 虑 了 优化 工 县 箱 和 
MATLAB 数值 计算 坏 境 的 能 力 ， 使 其 可 以 通过 以 下 方式 来 求解 优化 问题 : 
a) 吉 传 算法; 

b) 直 忆 搜 索 。 


Link for Meodelsim 
Link for Modelsim 是 一 个 仿 和 真 接口 ， 它 将 MathwWorks 的 工具 与 EDA 集成 起 


来 ， 末 用 于 可 婉 程 门 阵列 和 ASIC 电路 设计 。 这 个 接口 提供 了 Mentor 图 形 化 的 
HDL 仿真 器 、MoedelSim SE/PE 和 MATLAB 及 Simulink 之 加 快速 的 双向 连接 ， 可 
以 进行 息 接 的 硬件 如 计 、 验 证 和 仿 丙 。 
OPC Toolbox 
OPC Toolboex 和 包含 了 一 系列 的 基于 MATLAB 计算 环境 的 M 文件 函数 和 MEX 
充 件 动态 连接 库 ， 它 主要 有 以 下 特点 : 
a) 提供 了 :个 能 与 :个 或 多 个 OPC 服务 器 交互 的 柜 损 ; 
b) 与 OPC 基本 的 数据 接 入 标准 兼容 ; 
cy 07 DPC 服务 器 进行 事件 驱动 的 父 互 ; 
d) 面向 对 象 的 屋 次 结 均 用 于 管理 与 OPC 服务 器 的 连接 . 
RE Tooibox 
REF 工具 箱 可 以 生成 和 集成 REF 电路 ， 用 于 在 频 域 对 功 举 和 噪声 进行 仿真 ， 而 
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iT 





卫 还 可 以 读 、 写 、 








芭 


分 析 、 组 合 和 可 视 化 RF 网 络 参数 ， 


《3) Simulink 新 产品 


Embedded Target for TI C2000 DSP Platform 

Embedded Target for TILC2000 DSP Platform 1.0 是 一 个 新 的 产品 ， 可 以 生成 、 
仿真 和 下 载 可 执行 代码 到 C2000 DSP 目标 板 上 。 
Simulink Control Design 〈《Simulink 控制 设计 ) 

Simulink Control Pesign 提供 了 对 Simnlink 中 的 控制 系统 和 物理 模型 进行 线性 
化 的 工具 ， 它 使 用 了 图 形 用 户 接口 使 得 访 置 运行 条 件 、 模 型 线性 化 和 分 析 结 果 更 
旭 简 单 。 比 性 化 后 的 Simulink 模型 使 得 系统 分 析 和 补偿 器 设计 变 得 更 为 方便 ， 它 
的 应 用 领域 包 托 ; 

a) 航空 飞行 控制 、 导 航 ; 

b) 自动 化 领域 :站 航 控制 、 发 射 控制 ; 

c) 访 备 制造 ， 电 宙 、 磁 表 驱 动 。 

Simulink Parametet Eastiitnation 《Simulink 参数 估计 ) 

Simulink Parameter Estimation 可 以 利用 经 验 输 入 /输出 数据 来 估计 一 个 
Simulink 模型 的 参数 和 初始 状态 ， 它 提供 了 一 个 图 形 用 户 接口 使 得 上 述 估 计 过 程 
更 加 简单 。 





(4) 新 的 模块 


RF Blockset 《RF 模块 ) 

RE Blockset 是 一 个 设计 、 分 析 和 仿真 RF 通信 系统 的 工具 ， 它 在 时 域 中 使 用 
基带 同一 行为 模型 来 建 模 和 分 析 RE 系统 ，REF 模块 可 以 让 开发 者 使 用 RE 元 件 库 
来 组 合 复杂 的 RE 系统 。 

Signal Processing Blockset《〈 信 号 处 理 模块 ) 
Signal Processing Blockset 是 原 产 邮 DSP Blockset 的 改名 。 


2， 和 更 新 的 产品 
MATLAB 了 在 增加 新 产品 的 同时 ， 还 对 原 有 的 产品 进行 了 更 新 。 
(1) MATLAB 产品 更 新 


MATILAB Complier 
MATLA Report Cenerator 
EXcel Link 


(2) 了 有 具 箱 更 新 


Communications Tooibox (通信 工具 箱 ) 
Control System Toolbox 〈 控 制 系统 工具 箱 ) 
Data Acquisition Toolbox 《数据 采集 工具 箱 ) 
Database Joolbox 数据库 工具 箱 ) 

Filter Design Toolbox 〔 庆 波 器 设计 工具 箱 ) 
Image Processing Toolbox 【图 像 处 理工 具 箱 ) 
Instrument Control Toolbox 〔 仪 器 控制 工具 箱 ) 








2 





Optimization Toolbox 《优化 工具 箱 ) 

Signal Processing Toolbox 《信和 号 处 理工 具 箱 ) 
Virtual Reality Teolbox 《虚拟 现实 工具 箱 ) 
System Identification Toolbox〈 系 统 辩 识 工具 箱 ) 
Wavetet Toolbox (小 波 工具 箱 ) 


(3 Simulink 更 新 


和 


Embedded Target for Infineons C166 Microcontrollers 
Embedded Target for Motorolas HC12 
Embedded Target for Motorolae MPC55S5 
Embedded Target for OSEKAVDXS8 
Embedded Target for TIC60O00TM DSP 

取 eal-Time Windows Target 

Real-Time Warkshop?” 

SimMechanics 

SijmPowerSystems 

XPC Target 

xXPC Targe 嫩 oxm 


(4) 模 起 更 新 


Cormrmunications Blockset 
Dials 此 Gauges 了 lockset 

了 DSP Blockset 

Fix-Point Blockset 

Nonlinear Control Design Blockset 
Signal Processing BIockset 


116 _ Simulink 6.0 的 新 特点 

















Simualink 是 一 个 多 领域 仿真 和 基于 模型 的 动态 系统 设计 的 平台 ， 它 握 供 了 一 个 交互 式 
的 图 形 环境 和 一 个 自 定 义 的 模块 库 集 ， 使 得 开发 者 可 以 准确 地 进行 系统 的 设 填 、 仿 大 、 应 
用 .测试 和 控制 。Simulink 6.0 改进 了 响应 率 、 建 模 逼 真 度 和 工作 殖 率 ， 其 新 特点 主要 包括 


以 下 4 个 方面 。 




















(1) 基于 元 件 的 大 系统 建 模 


能 够 将 一 个 模型 分 段 成 多 个 文件 ， 每 一 个 文件 是 一 个 分 郊 的 模型 : 

能 够 在 集成 系统 模型 之 前 ， 对 每 一 个 单独 的 元 件 进 行 建 模 、 仿 真 、 测 试 和 应 用 ; 
增强 了 将 用 户 模型 集成 到 基于 已 有 文件 的 配置 管理 和 版 本 控制 软件 的 功能 : 

增 如 了 大 模型 的 更 新 图 表 和 仿真 的 速度 ， 

提供 了 分 开 的 工作 空间 ， 用 于 每 个 模型 参数 和 变量 的 存储 和 管理 ; 
增强 了 用 于 定义 接口 的 总 线 支 持 。 























[2 Simulink 和 状态 流 集 成 


各 本 下 





生 。 暑 一 的 槛 型 报 索 器 ， 用 于 导航 。 产 生 . 配置 和 搜索 用 卢 异 型 的 所 有 信号。 参数 和 
属性 ; 

重 。 蚜 一 的 仿真 和 代码 产生 选项 ， 

生产 生 和 存 人 这 个 佑 直 和 代码 生成 配置 ， 

137 数据 管理 和 可 视 化 

二 痢 的 数据 对 蔓 用 于 定 久 早 格 .总 上 及 自 定 交 的 玖 据 娄 型 对 得 ， 

量 在 下载 如 权 志 到 模型 的 情况 下 可 以 增加 粥 试点 : 

重 。” 情 导 和 示 波 占 管理 器 能 名 在 下 增加 幅 绒 的 情况 下 将 Saurce 和 8inks 连接 到 楼 型 

“4 LATLAB 语言 支持 

一 从 虞 六 式 的 MATLAB 算 祛 可 以 生硬 世代 三 ; 

呈 。 增 强 了 生成 册立 件 的 & 函数 的 功能 ， 


1.2 MATLAB 快速 入 门 


站 MLATLA 下 Ex 上 市 以 素 ， 相 对 于 以 前 的 碑 相 ，MATLAB 最 赛 出 和 最 实用 的 地 方 是 向 
用 户 提供 了 前 所 未 有 的 成 系列 的 变 互 式 工作 界面 。 了 贱 、 热 秋 和 党 担 这 些 诡 互 界面 的 基 村 
功能 和 可 作 方式 ， 对 于 正确 快速 地 利用 神经 网 络 工 具 藉 可 以 起 到 事半功倍 的 作用 。 因 此 ， 
本 和 节 将 专门 从 弓 MATLAB 主 窗口 中 最 和 沉 用 的 交互 界面 : 历史 指令 窗 , 当 莘 目录 浏览 器 , 工 
作 空 间 误 览 器 、 内 存 数组 编辑 器 ， 交 互 界 面 分 类 目录 窗 。M 立 慎 编辑 7 调试 名 有 虽 上 粕 助 导航 / 
浏览 占 。 


1.2.1 人 靖 令 行 窗口 


催 季 行 窗口 《Comimaad Windawy 如 图 1-1 所 示 ，、 可 以 在 调和 他 行 窗 口中 输 六 WiIATLAE 
谭 和 地， 可 以 是 一 个 单 融 的 MATLAB 语 章 ， 电 可 以 是 一 段 利用 MATLAE 编程 功能 实现 的 伐 


例 1.1 在 命令 行 窗口 创建 一 个 BP 网 络 。 在 命令 行 窗口 中 输入 
ET 


办 大 光 履 证 摘 回 幸 鱼 二 站 东 机 地 就 会 要 执 行 执行 结果 如 图 L1 所 示 。 图 中 是 对 刚刚 
创建 前 BE 局 络 的 详细 刘表 。 

在 创建 神经 网 络 时 , 缀 常 需要 用 到 旦 阵 , 在 MATLAB 人 市 信行 中 , 短 阵 有 两 种 输入 方式 。 

例 1.2 输入 - -个 简单 的 类 阵 | 中 该 矩阵 为 神经 网 络 输入 向 量 元 素 的 范围 。 


方法 1 在 商 邓 行 中 输 六 As 1 河 权 ' 
方针 2 在 疝 闻 行 中 输入 A=Inl 

在 旨 ， 
接 回 车 键 后 ， 输 出 结果 部 是 


下 二 四 


1 
了 于 机关 。 寺 可 
旭 音 征 要 获取 算 阵 A 中 其 相 元 囊 ， 电 需 在 商 李 行 窗 口中 输 六 Aiiii， 友 可 蓝 得 所 上 阵 点 
的 第 1 行 第 j 列 的 元 豆 。 如 
着 和 2 


若 希 要 获取 矩阵 的 某 行 向 量 ， 只 希 输 入 Att:1， 其 中 1i 为 所 需 的 行 数 。 同 理 ，Af: 中 可 以 

获得 矩阵 的 第 j 列 向 量 。 如 
在 他: 

部 -于 本 





于 


‖ 夭 站 画 站 本 和] [局 了 小 湄 ist as 1 
| 
放电 
四 EL 全 5 WEU 5 


TEL 


ELSEEE 上 

放 本 Larces 了 
了 EECEti 有 器 
aaEErEeEeet | 外 |，] 
erEapnaEtt 恒 Di 1 叫 


图 1.1 疝 沁 条 窗口 


在 利用 MATLAB 进行 编程 或 者 在 研 令 行 中 输入 而 对 时 ,部 有 可 能 出 现 命令 或 代码 比较 
榨 的 情况 ， 这 里 就 需要 使 用 命令 的 彝 行 刁 六 。 

例 丰 .3 在 冀 乞 行 窗 口中 彝 行 输 天 符 陈 AT 于 瑟 本 盏 可 二 了 了 邱 了 昌 |。 

输 六 页 过 司 ; 

1 斌 3 看 
了 于 有 了 到 
回 车 后 畏 出 靖 果 为 
一 ”王国 
， 
和 JR 1 

伍 1. 本 在 曾 对 行 窗口 中 利用 plot 函数 综 测 正弦 函数 图 形 。 

函数 plet 在 利用 神色 网 络 工具 箱 时 使 被 经 常用 到 ， 它 是 寺 基 本 的 二 手 绽 图 函 束 。plat 
的 基本 调用 格式 有 以 下 3 种 。 

[Lettx 9 

如 果 半 沽 向 量 ， 则 忆 款 元素 值 为 就 坐标 ， 以 相应 元 素 的 下 标 作为 棋 坐 标 来 综 函 数 图 ， 
站 站 去 为 实数 窍 阵 ， 则 扶 列 绘制 每 列 元 素 值 相对 其 下 标的 连 线 图 ， 图 中 曲线 等 于 和 阵 的 列 
数 。 刀 漂 关 为 复数 托 阵 ， 则 分 别名 和 的 实 部 孟 和 虚 部 阵 对 应 的 列 元 索 为 横 纵 坐标 符 制 多 条 
连 臧 圈 。 

让 各 王 和 9 

奶 果 x、Y 为 同 纵 向 乔 ， 则 绽 制 以 5、Y 为 横 负 坐标 的 连 线 图 ， 家 杂交 是 向 量 ，Y 是 一 


二 


下 | | 
1 种 经 同 络 醒 论 与 MATLAB 了 文 现 引 ii 硬 ime = 全 到 se 
个 与 立 同 维 的 矩阵 ， 则 络 制 康 条 不 同色 彩 的 连 线 图 ， 连 线条 数 等 于 y 阵 的 另 一 瞧 数 。 如 栗 
x& 和 Y 是 同 维 矩 阵 ， 则 以 xy 对 讶 元 素 为 槛 纵 举 标 分 别 束 制 晶 线 ， 曲 线 的 条 数 等 于 算 阵 的 
行 数 。 
【二 1 PilotrXw:5 
s 表示 线条 的 瑚 色 和 类 型 ， 如 sfY'， 表 示 各 点 是 由 红色 的 + 号 绽 制 的 。 徊 果 设 有 特别 
注 明 ， 上 默认 的 类型 为 极 色 的 线条 
现 有 一 个 正 绰 函数 y=sinfxj， 皖 制 其 函数 图 ， 在 商 信 行 窗口 中 输 六 以 下 代码 后 接 回 车 
乌 ; 





给 制 结果 如 图 1-22 所 示 。 


图 1-2 刀 旨 机 热 


对 于 较 复 杂 的 给 图 过 程 , 还 需要 其 他 比较 重要 的 函数 和 标记 , 应 用 比较 过 的 有 hold on， 
haold of 和 看 Eure。 的 西 者 用 于 保存 阁 制 句 栅 ， 适 用 于 在 同一 张 图 上 锭 制 要 条 曲线 的 情形 ; 
后 者 用 于 体 止 绘制 柯 柄 ， 表 示 重 开 一 张 图 进行 绘制 ， 

楼 下 来 近 制 三 条 正弦 函数 曲线 ， 其 中 在 第 一 张 图 上 纵 制 两 条 ,在 第 二 张 图 上 绘制 一 条 。 
在 命 笠 行 窗口 中 输入 以 下 代码 后 技 回 车 键 





绘制 结果 如 图 1-3 和 图 1-4 所 示 ， 


1.2.2 ”其 他 重要 窗口 


图 1-3 琐 数 y=sinx 和 ?sinf2x) 


SiIntT 号 XI 


图 1-4 函数 y=sinf1.5x) 


MATLAB 主 窗 口中 还 有 儿 个 比较 重要 的 窗口 , 如 命令 行 历 史实 口 (Comtmand History )、 
当前 路 径 窗口 《Curment Directory) 等 这些 窗 口 和 命令 行 窗口 是 密切 相关 的 ， 它 们 的 设置 
会 影响 到 命令 行 窗 口中 命令 的 执行 情况 ， 


1. Cormnmand History 窗口 


该 窗口 中 存储 了 在 命令 行 窗口 中 输入 的 所 有 命令 ， 如 图 1-$ 所 示 。 如 果 想 重新 执行 已 
经 运行 过 的 命令 ， 该 窗口 提供 了 一 个 很 好 的 选择 。 
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本 








本 中 用 吾 问 络 苗 p 引 MATLAB :7xmw 


-tiL 慰 卫 本 吾 
] 本 一 


图 1.5 Caamd Higory 而 可 


如 果 需 要 重新 运行 该 窗 口中 的 命 乞 ， 只 需 在 窗口 中 选中 该 傅 对 ， 姓 后 双击 鼠标 即 可 ， 
若 需 要 重新 运行 事 行 市 本， 只 需 接任 【Shi 襄 】 键 ， 邹 后 选中 需要 重新 执行 的 页 寺 ， 观 击 选 
中 的 调 令 就 行 了 。 

2 Currenmt Dircctior 窗口 

该 密 口 指定 了 当前 的 ， 如 果 不 加 以 改动 的 话 ， 每 亿 启 动 MATLAB， 该 窗口 默认 的 当前 
天 大 TEL 有 日 Tork 【全 为 网 上 TA 开 的 安装 音符 )， 可 图 1-6 所 示 。 

访 窒 口 显示 了 当前 下 所 有 的 文件 和 文件 奕 ， 双 击 和 MATLAB 相关 的 文件 即 可 运行 之 ， 
单 击 副 入 乌 ， 就 可 以 改变 当前 的 聊 径 ， 

如 图 1-6 所 示 的 M 文件 bshm, 当前 路 至 下 的 文件 在 当前 路 烃 改 生发 变 的 
情况 下 ， 喜 和 寺 法 在 春季 行 窗口 中 正常 运行 了 。 会 出 现 如 下 的 错误 提示 ， 





| 本 下 攻 。| 让 司 克昌 了 5 本 司 通 画 


图 1 Curremt Direetaf 备品 
3 工作 宰 间 浏览 器 【Wipakspace Browser) 


工作 空间 剂 览 器 存储 井 显示 了 当前 命令 行 窗口 中 所 有 的 变量 ， 如 图 1-7 所 示 。 这 些 训 
量 量 保存 在 肉 存 中 的 ， 在 MATLAB 进程 外 束 以前， 一直 是 话 动 的 


| 








图 1-7 Warkwpace 日 rwSET 


在 命 对 行 窗口 中 输入 whe 和 whos, 可 以 查看 当前 内 存 中 的 所 有 变量 ,包括 变量 的 和 名称， 
nn 
2 醒 


Eee 


在 命令 行 窗 口 中 办 cl elear， 可 以 清除 当前 内 存 中 的 所 有 变量 ， 





此 时 ， 再 次 输入 whe， 已 经 没有 任何 变量 显示 了 。 查 看 Workspace Browser 乌 口 ,其 中 
变量 显示 部 分 也 变 成 了 空白 。 


1.2.3 EditorDebugeger 窗口 


该 窗口 用 于 MATLAB 脚本 的 编写 和 执行 , 如 图 1-8 所 示 , 脚本 的 编写 有 很 多 福 意 事项 ， 
许多 MATLAB 节 梧 和 败 灶 已 经 给 出 了 大 量 的 说 明 ， 这 也 不 是 本 书 的 重点 ， 因 此 ,就 不 多 做 
从 绍 了 。 

当 副 本 编写 结束 后 ， 保 存 沽 一 个 M 文件 ， 此 时 ， 可 以 从 【Debue]】 菜单 中 选择 【Run] 
命 他 ， 也 可 以 直接 按 【Fs] 键 来 执行 该 立 忻 。 

另外 ， 也 可 以 在 毅 竺 行 洽 口中 输 关 文件 性 后 技 回 车 链 来 运行 该 文件 。 当然 ， 前 提 是 编 
写 的 M 文件 设 有 错误 。 


3 可 2 
各 辣 络 本 PSMATLAB xyw 


11 下 [证 刘 机 1 


和 站 二 汪 站 和 | 放 古 则 


站 1 二 汪 必 ETi 于 可 ii 鹿 
到 PP 


有 = 

下 EPEF Fi 让 3 Pered 了 TeeHCE FE 
| 
| 胡 诈 本 ESaehs 1 


轩 aaa 号 
证 本。 站 应 





图 1 各“EHitewDeeugEEr 而 口 


趟 要 采用 绝 吉 字 作为 现 文件 的 吉 守 ， 和 这 样 会 导 融 异 误 的 巾 果 ， 如 果 有 一 
尖 客 清 1 6 的 机 误 性 ,运行 后 的 由 时 只 紫 是 ams=1， 


1.2.4 MATLAB 帮助 系统 


MATLAB 7 提供 了 丰富 的 帮助 资源 ， 有 PDF 形式 。 也 有 网 页 形式 。 所 有 的 PDF 帮助 
充 档 都 在 安装 过 程 中 默 认 放 置 丁 XVMATLAB 77helpypdf_doc 文件 淆 中， 读者 可 以 选择 需要 
的 业 助 误 档 进行 查看 。 
在 羡 他 行 窗 口中 输入 help 仙 仿 后 撤回 车 刍 ， 显 示 了 所 有 的 帮助 主题 ， 结 昌 为 








其 中 ，name 为 需要 帮助 的 范 数 或 工具 箱 的 名 称 。 倒 好 ， 需 要 有 基 前 向 型 网 疼 的 创建 函 
数 new 作 的 有 关 情 息 ， 可 在 命令 行 窗口 中 输入 如 下 命令 并 按 回 车 键 





晴 果 沽 : 





结果 中 提供 了 丰富 的 帮助 信息 ， 包 括 函数 的 功能 、 调 用 方法 、 各 参数 的 意义 。 使 用 过 
得 中 的 注意 事项 和 示例 ， 最 后 还 给 出 了 与 该 函数 相关 的 其 他 函数 的 名 称 。 
另外 ， 在 MATLAB 主 窗口 中 ， 在 【Help】 菜单 下 选中 【MATLAB Help]】 人 市 舍 ， 就 可 
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以 启动 从 成 式 的 帮助 系统 ， 如 图 1-9 所 示 ， 这 个 帮助 系统 非常 完善 ， 而 且 容 易 查询 ， 可 以 
轻松 地 找 出 所 需 的 帮助 信息 。 岁 中 显示 了 神 蚂 网 络 工 具 箱 中 前 向 型 网 络 创建 函 袁 new 埋 的 
帮助 信息 。 


LE 

DCT 
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因 13 集成 式 精 助 奈 线 
12.5 ”神经 网 络 工具 箱 快速 人 门 


MATLAB 7 对 应 的 术 晤 络 工具 稍 的 版 本 号 为 Vergion 403， 它 以 神经 网 络 理论 为 基 
础 ,利用 MATLAB 脚本 语言 怕 造 出 钠 型 樟 经 网 络 的 激活 函数 ， 如 线性 、 竞 争 性 和 饱和 线性 
等 识 活 函 粒 ， 合 设计 者 对 所 选 定 网 络 输出 的 计算 ， 变 成 对 激活 函数 的 调用 。 另 外 ， 根 据 各 
和 神 由 副 的 修正 网 络 权 值 的 规 刚 , 百 加 上 同 络 的 训练 过 程 , 利用 MATLAB 编写 出 各 种 网络 设 
计 和 训练 的 子 程序 ， 同 络 稚 计 人 员 可 以 根据 自己 的 需要 去 调用 工具 苯 中 有 基 的 设计 和 训 纤 
程序 ， 将 自己 从 繁 焉 的 斌 竹中 解脱 出 来 ， 集 中 精力 解雇 其 他 问题 ， 从 而 提 商 了 工作 和 分 率 。 

最 新 版 本 的 神经 网 阁 工 具 箱 几乎 庄 蓝 了 所 有 的 神经 网 络 的 基本 常用 模型 ， 如 感知 器 和 
BP 网 纤 等 。 对 于 各 种 不 同 的 网 络 模型 ， 神 经 网 络 工具 箱 巢 成 了 多 种 学 习 算 法 ， 为 用 户 提供 
了 极 夫 的 方 伍 。 另 外 ， 工 具 箱 中 还 给 出 了 妈 量 的 示例 程序 和 帮助 文档 ， 能 够 快速 地 寿 朋 用 
户 党 担 工 具 箱 的 应 用 方法 。 

目前 ， 术 弃 闽 络 工具 箱 中 提供 的 神经 同 络 模 埋 主 要 应 用 于 : 

提 。” 末 数 台 下 和 模型 所 合 : 

硬 ” 悄 息 站 理 和 预测 ， 

硬 神经 网 效 控 制 |; 

理 。 慧 障 访 断 ， 

在 实际 应 用 中 面 对 一 个 具体 的 问题 时 , 首先 需要 分 析 利用 神经 网 络 求解 问题 的 性 质 ， 
然后 依据 问 是 特点 ， 确 定 网络 槛 型 。 最 后 通过 对 网 阁 进 行 调 练 、 仿 真 等 ， 检 验 网 络 的 性 能 
是 否 请 中 要 求 。 下 面 褒 女 具 体 的 过 程 ， 

1. 和 确定 信息 表达 方式 

将 领 感 问题 及 其 相应 的 领域 铝 识 转化 为 网 络 可 以 接受 并 处 理 的 形式 ， 即 将 领 虞 问 题 头 
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放 人 人 





象 为 适合 于 网 络 求解 所 能 接受 的 某 种 数据 形式 ， 尽管 在 实际 语 用 中 问题 的 形式 会 是 多 种 
多 样 的 ， 但 不 外 平 以 下 几 种 : 
者 ”数据 样本 已 知 ; 
生 。” 数 据 样 本 之 间 相 互 关 系 不 明确 ， 
外 输入 /输出 稳 式 为 连续 的 或 者 离散 的 ; 
和 输入 数据 按照 模式 进行 分 类 ， 和 模式 可 能 会 具有 平移 、 旋 转 或 伸缩 等 变化 形式 ; 
者 
各 
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数 提 样 本 的 孩 处 理 ; 
将 数据 样本 分 为 训练 样本 和 测试 样本 。 
.网络 模 型 的 确定 
主要 是 如 何 根据 问题 的 实际 情况 ， 选 择 模 型 的 类 型 、 结 构 等 。 另 外 ， 还 可 在 典型 网 络 
模型 的 基础 上 ， 绑 合 问 题 的 具体 情况 ， 对 天 刚 络 进行 变形 、 扩 充 等 ， 同 时 还 可 以 采用 多 种 
网 络 模型 的 组 合 形式 。 
3. 网 络 参数 的 选择 
确定 网 络 的 输入 输出 神经 元 的 数目 ， 如 果 是 多 层 网 络 ， 还 需要 进一步 确定 隐 售 层 神经 
元 的 个 数 。 对 于 到 馈 神经 网 络 ， 如 Hopfield 网 络 和 Elman 网 络 ， 还 需要 进一步 地 设置 反 错 
神经 元 的 有 闫 属性 。 
4 训练 模式 的 确定 
包括 选择 合理 的 训练 算法 ， 确 定 合 适 的 训练 步 数 ， 指 定 适当 的 训练 目标 误差 ， 以 获得 
较 好 的 网 络 性 能 。 
5. 网 络 测试 
选择 合理 的 测试 样本 ， 对 网 络 进 行 测试 ， 或 者 将 网 络 应 用 于 实际 问题 ， 科 验 网 络 性 能 。 
值得 指出 的 是 ， 网 络 测试 过 程 需 要 遵循 “ 父 尺 测试 ”的 原则 ， 保 证 测试 的 有 效 性 、 准 确 性 
和 全 面 性 。 
总 之 ， 神 经 网 络 工具 箱 是 -- 个 内 容 全 面 、 操 作 方便 的 软件 包 ， 对 于 广大 神经 网 络 系统 
的 研发 者 来 说 ， 掌 握 神经 网 络 工 县 箱 的 应 用 将 使 得 自己 在 工作 中 如 虎 添 融 。 


1.3 ”神经 网 络 发 展 史 


神经 网 络 系统 理论 的 发 展 历 史 是 不 平衡 的 ， 自 1943 生 心 理学 家 MeCulloch 和 数学 家 
Pitts 提出 神经 元 生物 学 模型 《简称 M-P 模型 ) 以 来 ， 至 今 已 经 有 和 多 年 的 历史 了 。 在 这 
50 多 年 的 发 展 历史 中 ， 大 体 可 以 分 为 以 下 儿 个 发 展 阶段 。 


1.3.1 初期 阶段 


自 1943 年 MP 模型 开始 ， 至 该 世纪 6 年 代为 止 ， 这 一 段 时 间 可 以 称 为 神经 网 络 系统 
理论 发 展 的 初期 阶段 ， 这 个 时 期 的 主要 特点 是 多 种 网 络 的 模型 的 产生 与 学 习 算 法 的 确定 ， 
如 1944 年 Hebb 提出 了 Hebb 学 习 规 则 ， 该 规则 至 今 仍 是 神经 网 络 学 习 算 法 的 一 个 基本 规 
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人 
网，1957 年 Roseablatt 提出 了 感知 回 (Percepton ) 模型 ，1962 年 Widrow 提出 了 自 送 应 
(Adaline) 线性 元 件 模型 等 ， 这 些 模型 和 算法 在 很 大 程度 上 丰富 了 神经 阅 络 系统 理论 。 


1.3.2 ”停滞 期 


二 个 世纪 拘 年 代 到 30 年代， 神经 网 络 系统 理论 的 发 展 处 于 一 个 低潮 时 期 ， 造 成 这 种 
情况 的 原因 是 发 展 过 程 中 遇 到 了 小 质 的 困难 ， 即 电子 线路 变 尺 极限 的 困难 〈 对 站 个 神经 元 
就 存在 好 条 连 钱 )。 在 当时 的 条 件 下 ， 神 经 元 数量 ”的 大 小 受到 极 大 的 限制 ， 因 此 神经 网 
络 系 统 不 可 能 完成 高 度 集成 化 、 智 能 化 的 计算 任务 。 同 时 ， 神 经 网 络 系统 理论 本 身 也 有 很 
多 不 完善 的 地 方 。 所 以 ， 神 经 网 络 系统 理论 与 应 用 研究 工作 进展 缓慢 。 另 一 方面 ， 这 一 时 
期 正 是 数字 计算 机 发 展 的 全 盛 时 期 ， 无 论 在 硬件 、 软 件 还 是 技术 应 用 和 疼 品 市 场 方 面 都 取 
得 了 帘 飞 独 进 的 发 展 ， 使 得 人 批 有 才华 的 科学 家 的 注意 力 都 转移 到 数值 计算 机 方面 了 。 

虽然 形势 如 此 严 峨 ， 但 仍 有 很 多 科学 家 在 困难 条 件 直 坚持 开展 研究 ， 并 提出 了 很 多 种 
不 同 的 网 络 模型 ， 展 开 了 增加 网 络 功能 和 改善 学 习 算 法 等 方面 的 研究 ， 为 神经 网 络 系统 发 
展 的 高 潮 芮 定 了 坚实 的 基础 。 

Stephen Grossberg 是 这 些 人 中 最 有 影响 力 的 ， 他 深入 研究 了 心理 学 和 生物 学 的 处 理 ， 
以 及 人 类 信息 处 理 的 现象 ， 碟 思维 和 脑 紧密 地 结 人 台 在 一 起 ， 成 为 了 统一 的 理论 。 

芬兰 的 Kohenen 在 197t 年 开始 了 随 酌 连接 变化 表 方 面 的 研究 工作 ， 从 次 年 开始 ， 他 
将 研究 目标 集中 到 联想 记忆 方面 。 Kohonen 将 LVQ 网 络 应 用 到 语音 识别 、 模 式 识 别 和 图 像 
识别 方面 ， 取 得 了 很 大 的 成 功 。 


1.3.3 黄金 时 期 


从 20 世 红 80 年 代 开 始 ， 是 神经 网 络 系统 理论 发 展 的 黄金 时 期 。 这 个 时 期 最 其 标志 
的 估 物 是 美国 如 州 工 学 院 的 物理 学 家 John Hopfield。 他 于 1982 年 和 1984 年 在 美国 科学 院 
院 刊 上 发 表 了 两 篇 文章 , 提出 了 模仿 人 脑 的 神经 网 络 模型 , 即 著 名 的 Hopfietd 模 列 .Hopfield 
网 络 是 .一 个 互 连 的 非 线 性 动力 学 阅 络 ， 它 解决 问题 的 方法 是 一 种 反复 运算 的 动态 过 程 ， 这 
是 符号 逻辑 处 理 方法 所 不 具备 的 性 质 。 

20 世纪 中 年 代 ， 关 于 智能 计算 机 发 展 道路 的 问题 日 趋 迫 切 地 提高 到 日 程 上 来 ， 册 于 
计算 祈 的 集成 度 口 趋 极限 状态 ， 但 数值 计算 的 智能 水 平 与 大 脑 相 比 ， 仍 有 锐 大 的 差 赤 ， 时 | 
此 ， 就 需要 从 新 的 前 度 来 思考 智能 计算 机 的 发 展 道路 问题 。 这 样 -来 ， 神 经 网 络 系统 理论 
重新 受到 重视 。 所 以 ，20 世纪 80 年 代 后 期 到 9 年 代 初 ， 神 经 网 络 系统 理论 形成 了 发 展 的 
热点 ， 多 种 异型 、 算 法 和 应 用 问题 被 提出 ， 研 究 经 费 重新 变 得 充足 ， 完 成 了 和 根 和 多 有 意义 的 
工作 ， 

目前 ， 神 经 网 络 系统 理论 与 技术 的 发 展 大 体 分 为 以 下 三 个 方面 进行 。 

首先 在 慎 件 技术 方面 , 一 些 发 达 国 家 ， 如 美国 和 口 本 均 实 现 了 规模 超过 1000 个 神经 元 
的 网 络 系统 ， 这 样 的 系统 具有 极 涡 的 运算 速度 ， 而 且 已 经 在 股票 数据 分 析 中 得 到 了 应 用 。 
另外 ,为 了 克服 电子 线路 交叉 极限 问题 , 很 多 国家 都 在 研究 电子 元 件 之 外 的 神经 网 络 系统 ， 
如 光电 子 匹 件 和 和 牛 物 元 件 等 。 
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在 神经 网 络 系统 理论 的 研究 方面 主要 进展 有 Boltzmann 机 理论 的 研究 、 细 胞 网 络 的 
提出 和 性 能 指标 的 分 析 等 。 

神经 网 络 系统 的 应 用 碘 究 主要 集中 在 模式 识别 〈 语 音 和 图 像 识 别 》、 经 济 管理 和 优化 控 
制 等 方面 ， 它 和 数学 、 统 计 中 的 多 个 学 习 有 着 密切 的 联系 ， 如 线性 和 非 线 性 规划 问题 、 数 
值 逼 近 、 统 计 计算 等 。 另 外 ， 在 其 他 信息 处 理 癌 题 中 也 有 很 多 应 用 ， 如 数据 压缩 、 编 码 、 
密码 和 股市 分 析 等 领域 ， 应 用 内 容 十 分 丰富 。 


1.3.4 发展 展 望 


20 世纪 90 年 代 中 期 是 神经 网 络 系统 理论 进行 稳健 发 展 的 时 期 ， 在 经 历 了 20 世纪 8 
年 代 末 与 90 年 代 初 的 发 展 高 潮 之 后 , 人 们 肯定 了 它 的 前 途 , 但 同时 又 看 到 了 它 发 展 的 障碍 。 
与 20 世纪 后 年 代 到 70 年 代 相 比 ，80 年 代 到 90 年 代 的 发 展 无 论 是 在 硬件 技术 还 是 在 应 用 
范围 和 理论 水 平方 面 的 贡献 都 是 巨大 的 。 但 是 神经 网 络 系统 的 基本 四 难 ， 即 电子 线路 区 义 
的 困难 和 理论 研究 问题 的 困难 仍然 没有 实现 根本 性 的 突破 。 按 照 目 前 的 集成 电路 水 平 ， 已 
经 实现 了 1000 个 神经 元 的 网 络 ,这 样 的 规模 已 经 很 可 观 了 , 但 是 与 人 体 具 有 的 神经 元 数目 
动 辑 1010 一 105 相 比 ， 仍 然 还 有 较 大 的 鞠 距 。 因 此 ， 如 何 克 服 网 络 连 线 困 难 仍 是 神经 网 络 
技术 发 展 过 程 中 需要 克服 的 最 关键 的 问题 。 

另外 ， 丰 神经 网 络 系统 理论 研究 方面 ， 还 有 许多 问题 尚 待 解决 ， 如 技 照 生物 测 试 ， 每 
不 神经 元 只 有 104……105 个 突 触 ， 这 些 神经 元 是 如 何 连接 ， 又 是 如 何 工 作 的 ? 这 一 问题 还 有 
待 于 生物 、 医 学 和 数学 工作 者 的 研究 才 可 能 解决 。 另 外 ， 对 现 有 的 神经 网 络 系统 ， 也 有 许 
多 问题 ， 如 多 层 感 知 器 的 学 习 算法 问题 、Hopfield 网 络 的 假 吸 引 点 河 题 、 大 量 工程 应 用 中 
提出 的 神经 网 络 模型 中 的 学 习 算 法 问题 ， 都 迫切 需要 解决 。 


1.4 神经 网 络 模型 


神经 网 络 是 由 大 量 的 处 理 单元 〈 神 经 元 》 互相 连接 而 成 的 网 络 。 为 了 模拟 大 脑 的 基本 
特性 ， 在 神经 科学 研究 的 基础 上 ， 提 出 了 神经 网 络 的 模型 。 但 是 ， 实 际 上 神经 网 络 并 没有 
完全 反映 大 脑 的 功能 ， 只 是 对 生物 神经 网 络 进行 某 种 抽象 、 简 化 和 模拟 。 神 经 网 络 的 信息 
处 理 通过 神经 元 的 相互 作用 来 实现 ， 知 识 与 信息 的 存储 表现 为 网 络 元 件 互 连 分 布 式 的 物理 
联系 。 神 经 网 络 的 学 习 和 识别 取决 于 各 神经 元 连接 权 系 数 的 动态 演化 过 程 


1.4.1 ”神经 元 结构 模型 


神经 元 是 神经 网 络 的 基本 处 理 单元 ， 一 般 表 现 为 一 个 多 输入 、 单 输出 的 非 线性 器 件 ， 


通用 的 结构 模型 如 图 1-10 所 示 。 
和 其中， 下 为 神经 元 了 的 内 部 状态 ， 8 为 阅 值 ， 厂 为 输入 信号 ， 邮 表示 与 神经 元 总 连接 


的 权 值 ，*% 表 示 某 一 外 部 输入 的 控制 信号 




















的 
3 





六 六 作证 征 才 生生 和 和 和 本 人 


4 (+ wz 人 (-b 
,0 )= fs ] 








字 - 


图 1-10 坤 经 元 铺 构 模型 


神经 元 异型 常用 一 阶 微分 方程 来 措 述 ， 它 可 以 模拟 生物 神经 网 络 突 触 膜 电 位 随时 间 变 
化 的 规律 。 

神经 元 的 输出 外 函数 了 表示 ， 一 般 利 用 以 下 函数 表达 式 来 表现 网 络 的 非 线性 特征 。 

(1 关 值 型 ， 为 阶 跃 函数 





ja)=| 全 袜 ， 
om<on 

2) 分 段 线 性 型 
1 于 之 到 


(一 Bi 十 问 天 过 站 去 且 
卫 于 扫 本 
(3) 8 型 函数 
1+exp(- 中 /ce 


(= 


其 中 ， 它 为 常数 。 
S 型 画 数 反映 了 神经 元 的 饱和 特性 ， 由 于 其 函数 连续 可 导 ， 调 节 曲 线 的 参数 可 以 得 钊 
类 羽 阔 值 函数 的 功能 ， 因 此 ， 该 函数 被 广泛 应 用 于 许多 神经 元 的 输出 特性 中 。 


1.4.2 ”神经 网 络 的 互 连 模 式 





根据 连接 方式 的 不 同 ， 神 经 网 络 的 神经 元 之 间 的 连接 有 如 下 儿 种 形式 。 
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EN 





1， 前 向 网 络 

前 向 网 络 结构 如 图 1-11 所 示 ， 神 经 元 分 层 排列 ， 分 别 组 成 输入 层 、 中 间 层 〈 也 称 为 隐 
会 屋 ， 可 以 由 若干 层 组 成 和 输出 层 ， 每 一 层 的 神经 元 只 接受 来 日 前 一 层 神 经 元 的 输入 ， 
后 面 的 层 对 前 面 屁 没有 信号 皮 馈 。 输 入 模式 经 过 各 层次 的 顺序 传播 ， 最 后 在 输出 层 上 得 到 


输出 。 感 知 器 网 络 和 BP 网 络 均 属 于 前 向 网 络 。 
rr 





图 1-11 前 向 网 络 结构 


2. 有 反馈 的 前 向 网 络 
其 络 构 如 图 1-12 所 示 ， 从 输出 层 对 输入 屋 有 信息 反馈 ， 这 种 网 络 可 用 于 存储 某 种 模式 
序列 ， 如 神经 认 知 机 和 回归 BP 网 络 都 属于 这 种 类 型 。 














到 1-12 有 有 反馈 的 前 向 网 络 结构 


3. 层 内 有 相 巨 结合 的 前 向 网 络 

其 结 移 如 图 1-13 所 示 ， 通 过 层 内 神经 元 的 相互 结合 ， 可 以 实现 同一 层 内 神经 元 之 间 的 
横向 抑制 或 兴奋 机 制 。 这 样 可 以 限制 每 层 内 可 以 同时 动作 的 神经 元 素 ， 或 者 把 每 层 内 的 神 
经 元 分 为 若干 组 ， 让 每 一 组 作为 一 个 整体 进行 运作 。 例 如 ， 可 利用 横向 抑制 机 理 把 某 层 内 
具有 最 大 输出 的 神经 元 挑选 出 来 ， 从 而 抑制 其 他 神经 元 ， 使 之 处 于 无 输出 的 状态 。 

















图 1-13 ” 必 内 有 相互 结合 的 前 向 网 络 结构 


4. 相互 结合 型 网 络 〈 全 互 连 或 部 分 互 连 ) 
相互 结合 型 网 络 结构 如 图 1-14 所 示 ， 这 种 网 络 在 任意 商 个 神经 元 之 问 都 可 能 有 连接 。 
Hopfield 网 络 和 Boltzmann 机 均 属 于 这 种 类 型 。 在 无 反馈 的 前 向 网 络 中 ， 信 号 一 旦 通过 某 












1 
神经 元 ， 该 神经 元 的 处 理 就 结束 了 。 而 在 相互 结合 网 络 中 ， 
递 ， 网 络 处 于 一 种 不 断 改变 状态 的 动态 之 中 。 信 和 号 从 某 初始 状态 开始 ， 经 过 若干 次 变化 ， 
才 会 达到 基 种 平衡 状态 。 根 据 网 络 的 结构 和 神经 元 的 特性 ， 网 络 的 运行 还 有 可 能 进入 周期 
振荡 或 其 他 如 混沌 等 平衡 状态 ， 





让 


图 1-14 丰 互 结合 型 网 络 结 构 


1.5 神经 网 络 的 特性 及 实现 


神经 网 络 的 全 称 是 人 工 神经 网 络 (Artificial Neural Network，ANN)， 它 采用 物理 上 可 
实现 的 器 件 或 采用 计算 机 来 模拟 生物 体 中 神经 网 络 的 某 些 结构 和 功能 , 闭 应 用 于 工程 领域 。 
神经 网 络 的 着 眼 点 不 在 于 利用 物理 器 件 完整 地 复制 生物 体 中 的 神经 细 哆 网 络 ， 而 是 抽取 其 
中 订 利 用 的 部 分 来 虎 服 目前 计算 机 或 其 他 系统 不 能 解决 的 问题 ， 如 学 习 ， 控 制 、 识 别 和 专 
家 系统 等 。 随 着 生物 和 认 知 科学 的 发 展 ， 人 们 对 人 脑 的 认识 和 了 解 越 来 越 深入 ， 神 经 网 络 
必然 会 获得 更 加 广阔 的 发 展 空间 和 应 用 范围 。 

虽然 ANN 与 真正 的 和 物 神 经 网 络 有 差别 ， 但 由 于 它 汲取 了 生物 神经 网 络 的 部 分 优点 ， 
内 此 具有 一 些 固有 的 特性 。 

(1)》 ANN 在 结构 上 与 目前 的 计算 机 本 陆 不 同 , 它 是 由 很 多 小 的 处 理 单 元 互相 连接 而 
成 的 ， 每 个 处 理 单元 的 功能 简单 ， 但 大 量 简单 的 处 理 单元 集体 的 、 并 行 的 活动 得 到 预期 的 
识别 、 计 算 的 结果 ， 有 有 较 快 的 速度 . 

(2)》 ANN 具有 非常 强 的 容错 性 ， 即 局 部 的 或 部 分 的 神经 元 损坏 后 ， 不 会 对 全 局 的 河 
动 造 成 眼 大 的 影响 。 

3) ANN 记忆 的 信息 是 存储 在 神经 元 之 问 的 连接 权 值 上 ， 从 单个 权 值 中 看 不 出 存 久 
信息 的 内 容 ， 因 而 征 分 布 式 的 存储 方式 。 

(4) ANN 的 学 习 功能 -| 分 强大 ， 它 的 连接 权 值 和 连接 的 结构 都 可 以 通过 学 习 得 到 。 









































1.6 人 小 结 


本 章 对 MATLAB 的 产生 背景 和 发 展 过 程 、 神经 网 络 上 上 其 逢 的 特性 , 以 及 一 些 简 单 的 使 
用 方法 、MATLAB 7 的 最 新 特性 进行 了 简单 介绍 ， 并 概述 了 神经 网 络 的 发 展 由 史 、 分 类 、 
特性 和 实现 等 。 可 以 说 ， 神 经 网 络 具有 强大 的 窜 错 功能 ， 可 以 比较 轻松 地 实现 非 线 性 映射 
过 程 ， 并 且 具 有 人 规模 计算 的 能 力 。 基 此 ， 它 在 自动 化 、 计 算 机 和 人 工 智能 领域 都 有 者 广 
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这 证 和 5， ， 


信号 要 在 神经 元 之 间 的 反复 传 









8 | 生 二 SN 流 生 和 


和 


这 的 适用 性 | 实际 上 也 确实 得 到 了 大 重 的 应 用 ， 解决 了 很 多 利用 传统 方法 难以 解决 的 问题 ， 
而 MAILAB 神经 网 络 工具 箱 的 出 现 ， 更 加 拓宽 了 神经 网络 的 应 用 算 间 。 神 经 网 络 工具 箱 将 
很 多 原本 需要 手动 计算 的 工作 训 给 计算 机 ， 一 方面 提高 了 工作 效率 ;为 一 方面 ， 还 提高 了 
计算 的 准确 度 和 精度 ， 诚 轻 了 工程 人 员 的 负担 。 

接 下 来 我 们 正式 开始 学 习 神 经 网 络 工具 箱 。 





第 2 章 神经 网 络 工具 箱 函 数 及 实例 








裤 经 网 络 理论 是 在 加 世纪 提出 的 . 自 此 以 后 ， 由 于 自身 国有 的 超 强 适应 能 力 和 学 习 能 
力 ， 神 经 网 络 在 很 多 领域 获得 了 极其 广泛 的 应 用 ， 解 决 了 许多 传统 方法 难以 解决 的 问题 ， 
发 挥 了 巨大 的 人 作用。 迄今 为 止 ， 神 经 网 络 在 自动 控制 、 计 算 机 科学 、 机 器 学 习 、 故 障 诊断 
与 检测 、 心 理学 帮 至 经 济 学 等 领域 都 有 着 大 量 的 应 用 。 

虽然 神经 网 络 有 着 广泛 的 实用 性 和 强大 的 解决 问题 的 能 力 ， 但 是 它 也 存在 一 些 缺陷 。 
比如 ， 神 经 网 络 的 建立 实际 上 就 是 一 个 不 断 尝 试 的 过 程 ， 以 BP 网 络 为 例 ， 网 络 的 层 数 及 
每 一 层 结 点 的 个 数 都 是 需要 不 断 地 尝试 来 改进 的 。 同 样 ， 对 于 神经 网 络 的 学 习 过 程 来 说 ， 
固然 已 经 有 很 多 已 经 成 形 的 学 习 算 法 ， 但 这 些 算 法 在 数学 计算 上 都 比较 复杂 ， 过 程 也 比较 
繁琐 ， 容 易 出 错 。 因 东 ， 采 用 计算 机 辅助 进行 神经 网 络 设计 与 分 析 就 成 为 了 必然 的 选择 。 
目前 ， 已 经 有 一 些 比较 成 熟 的 神经 网 络 软件 包 。 其 中 ， 应 用 最 为 广泛 的 软件 包 之 - -就 
是 MATLAB 的 神经 网 络 工具 箱 。 自 从 MATLAB 5$.x 提供 了 该 工具 箱 后 ， 它 已 经 成 为 工程 
人 员 进 行 神经 网 络 分 析 与 设计 的 首选 。 该 工具 箱 随 着 MATILAH 版 本 的 发 展 , 目 身 也 在 不 断 
完善 与 提高 ， 现 在 最 新 的 为 4.0.3 版 本 ， 是 迄今 为 止 最 为 全 面 和 强大 的 。 

本 章 概要 介绍 了 最 新 版 的 MATLAB 神经 网 络 工具 箱 的 各 种 网 络 的 函数 。 

本 章 主要 内 容 有 : 

昌 ”神经 网 络 工具 箱 中 的 公共 邓 数 
感知 器 的 神经 网 络 工具 藉 未 数 
BP 网 络 的 神经 网 络 工具 箱 函 数 
线性 网 络 的 神经 网 络 工具 夭 邓 霓 
自 姐 织 竟 钊 网 络 的 神经 网 络 工具 箱 函 副 
径 向 基 网 络 的 神经 网 络 工具 箱 通 数 
反馈 网 络 的 神经 网 络 工具 箱 函 数 


2.1 概 述 


神经 网 络 工 具 夭 是 在 MATLAB 环境 下 开发 出 来 的 许多 工 上 其 箱 之 一 。 它 以 人 工 神 经 网 络 
理论 为 基础 ， 利 用 MATLAB 编程 语言 构造 出 许多 则 型 神经 网 络 的 激活 函数 ， 如 $ 型 、 线 
性 、 竞 争 屋 、 饱 和 线性 等 激活 函数 ， 使 设计 者 对 所 选 定 网 络 输出 的 计算 ， 转 变 为 厅 激活 转 
数 的 调用 。 另 外 ， 可 以 根据 各 种 典型 的 收 正 网 络 权 值 的 规则 ， 加 上 网 络 的 训练 过 程 ， 利 用 
MATLAB 语言 编写 各 种 网 络 权 值 训练 的 子 程序 。 这 样 一 来 ， 网 络 的 设计 者 可 以 根据 自己 的 
需要 调用 工具 箱 中 有 关 神 经 网 络 的 设计 与 训练 的 程序 ， 使 自己 能 够 从 繁琐 的 编程 中 解脱 出 
来 ， 集 中 精力 岂 考 和 解决 问题 ， 从 而 提高 效率 和 质量 。 

MATLAB 7 所 厅 应 的 神经 网 络 工具 箱 V4.0.3 的 内 容 非 常 丰 富 , 包含 了 很 多 现 有 的 神经 












































ES 
网 颖 新 成 果 ， 掩 中 涉及 到 以 下 拖 种 网 络 昼 型 ， 

感知 器 模型 
厂 性 读 疲 器 
BF 网 络 模型 
控制 系 红 网 妾 槛 型 
轻 向 基 网 络 槛 昏 
自 组 如 网 阁 
反馈 网 阁 
自 租 庶 污 让 和 自 适度 训 笑 

另外 ， 读 工具 箱 中 还 包 杂 大 量 的 箭 示 实例 ， 有 助 于 官学 者 架 理解 。 它 所 人 认 甸 的 网 络 
模型 和 家 鲍 可 以 通过 MATLAE 的 寿 助 进行 学 习 , 前 握 是 英语 水 平 要 是 角 商 ,如 在 MATLAA 理 
的 而 仿 窗 口中 键入 help nnet， 妈 可 得 到 神经 辣 络 工具 箱 的 有 共 版 本 信息 及 函 数列 表 ， 如 









限于 和 幅 ， 此 处 只 节 关 了 部 分 结果 ， 其 中 中 文 为 作者 添加 的 - 


2.2 ”神经 网 络 工具 箱 中 的 通用 函 煞 


神 蜂 网 络 工具 箱 中 琴 备 了 丰富 的 工具 函数 。 其 中 一 些 函 数 是 特别 针对 某 一 种 类 型 的 圳 
弃 网 络 的 ， 如 感知 器 的 创建 函数 ，BP 网 络 的 训练 函数 等 ;而 另外 一 些 函 表 则 是 通用 的 ， 几 
乎 可 以 用 于 所 有 类 型 的 可 皮 网 络 ， 如 神经 网 络 仿真 函数 、 初 始 化 函数 和 训练 函 娄 等 。 

本 节 主 要 人间 闸 了 通用 的 神经 网 络 工具 函数 ， 对 它们 的 功能 ， 调 用 格式 ， 人 性 用 方法 及 注 
意 事 项 做 了 详尽 的 说 明 。 表 寺 1 列 出 了 神经 网 络 中 一 些 比较 重要 的 通用 函 烙 。 


惠 3-1 


证 


PT 状 | ET 
am | ET 对 间 堵 进行 中 





1 和 和 时 玩 ; 


| ET 






2 | imw | 利 则 ManyairWidms 准则 对 四 考 行 相 几 化 
mawh | 调 抽 指定 的 函 秀 财 厌 进 全 化 
mm | 钴 入 闽 和 国 归 

吉 轻 两 比 生 上 机 配 ia 请 上 求 释 函 曾 





性 量 人 商量 和 园 慎 硬 量 的 情 必 一 盐 


王 二 二 二 硬 闻 三 而 有 
Ce haalims | 。 对称 证 限 幅 函 难 


板 恒 本 由 画 醒 







传 王 函 苔 


22.1 神经 网 络 仿 真 困 数 sim 


RE 调用 格式 为 
ef 四 





其 申 ，， 
YY 函 烙 返回 条 ， 网 络 输 出 : 
Ffi 函数 返回 条， 萤 些 输出 延 奴 : 
上 和 函数 返回 倩 ， 最 此 的 层 和 证 十 
巨 ， 画 数 熏 回 慎 ， 网 络 误差 ; 
Fedf， 函数 证 同 值 ， 网 络 性 能 
meals 灶 仿 真 的 神 贤 网 络 ; 
BE: 同族 输入 ， 
四; 霜 始 输 坟 延 退 ， 后 认 为 由 
上 宙 冶 的 屋 证 胃 ， 睹 认为 出 
T， 网 络 目标 ， 默 认为 册 

下 、Ai、 旺 漳 站 是 可 选 的 ， 它 们 只 用 于 存在 输 六 延 坊 和 层 延 妈 的 同 络 ， 

函 燥 中 用 到 的 信和 导 参 数 采 取 了 西 种 币 同 的 形式 进行 表示 ， 和 分 别 为 单元 阵列 和 矩阵 的 形 
武 。 拓 中 单元 阵列 能 慷 方 便 地 对 雪 输 六 密 输 出 的 神经 网 络 进 行 描 志 。 俏 号 大 灿 为 单元 阵列 
下 的 辐 关 朝 出 形式 为: 

Fi Mix TS 些 的 划 元 阵列 ， 王 个 元 素 Elitsl 都 曲 一 个 Ri 页 的 矩阵 

Bi 区 到 锥 的 单元 阵列 ， 王 让 元 素 Pik1 都 是 一 个 醚 基 吕 的 矩阵 ， 

ai 本 [区 LLD 摊 的 昔 元 阵列 ， 业 个 元 并 Ri 作 古 者 是 一 个 恒基 及 的 逢 策 ， 

T， NIXTS 但 的 单元 阵列 ， 每 个 元 豆 Plius1 帮 是 一 个 WiXxQ 的 和 拭 阵 : 


二 


Ai 





















吕 吕 


Y: NoxTS 维 的 单元 阵列 ， 每 个 元 素 Y{fits} 都 是 一 个 UixQ 的 矩阵 ; 


Pf，NixID 的 单元 阵列 ， 每 个 元 素 Pffikj} 都 是 一 个 RixwQ 的 扎 阵 ; 
Af: MIXLD 的 单元 阵列 ， 每 个 元 素 AfHikl]} 都 是 一 个 SixQ 的 矩阵 ; 
E:，NtXTS 的 单元 阵列 ， 每 个 元 素 P[its] 都 是 一 个 万 XR 的 矩阵 。 


其 中 ， 


Ai : 
;神经 网 络 层 底 的 数目 : 
: 神经 网 络 输出 的 煞 目 ; 
: 输入 延迟 的 数目 ， 

: 层 光 延 迟 的 数目 ，; 

: 时 间 步 妆 的 数目 ; 
批量 ; 

: 第 ;个 输入 的 长 度 ; 

: 第 层 的 长 度 ; 

， 第 工 个 输出 的 共度 ; 


神经 网 络 输入 的 数目 ; 


Pifik} ; 第 计 个 输入 在 ts=k-ID 时 刻 的 状态 
Pflik} ， 第 ;个 输入 在 fg=TS+k-ID 时 刻 的 状态 ; 
Aifik} ， 某 层 输 出 ;在 ti=kLD 时 刻 的 状态 ; 
Afliky ， 某 屋 输 出 在 ts=TS+k-LD 时 刻 的 状态 。 


矩阵 的 形式 只 用 于 仿真 的 时 间 步 长 TS=1 的 场合 ， 它 适用 于 单 输入 单 输出 的 网 络 ， 但 





也 同样 适用 于 多 输入 多 输出 的 网 络 。 在 矩阵 形式 下 ， 每 个 矩阵 都 是 将 对 应 的 单元 阵列 中 的 
元 素 组 台 而 成 的 。 其 中 ， 

P: Ri 的 总 和 XgQ 维 矩阵 ， 

Pi Ri 的 总 和 XUDxO) 维 矩阵 ; 

Ai Si 的 总 和 X(LD*Q) 维 矩阵; 

T: 而 的 总 和 XQ 维 矩 车 

Y: Ui 的 总 和 X 已 维 矩 阵 ; 

Pf: Ri 的 总 和 XUGD*Q) 维 矩阵 ; 

af: Si 的 总 和 XfLDr+O) 维 矩阵 ; 


E: Vi 的 总 和 xQ 维 矩 阵 。 














钱 归 神 经 网 络 ， 如 Hopfield 网 络 等 ， 


调用 格式 [YPE AH = simtnet,{Q TS}.Pi,AD 常 用 于 一 些 没有 输入 信号 的 回 








2.2.2 ”神经 网 络 训 练 及 学 习 函 数 


1 train 


该 函数 用 于 对 神经 网 络 进行 训练 。 调 用 格式 为 
[nettpYE,PfAH = train(NETPRTPLAi) 


28 
| 


人 


| 让 ,正和 和 着 三 train 的 下 下 展开 ADWwW2TW3 
其 中 ， 
NET， 特 训 暴 赃 厘 如 网 阁 ， 
环 网 络 的 目标 ， 上 默认 四 由 
Pi 审 蝗 的 输入 延 起 ， 默 让 汽 让 
上 ii 击 冶 的 屋 网 年 退 ， 上 加 试 为 丰 
WwWi 网 阁 嫩 枸 确认 向 量 ， 目 认为 室 ， 
mt， 函数 返回 利 ， 划 儿 后 的 神权 网 阁 ， 
本 画 数 鼻 回 慎 ， 训 蝶 记录 “所 括 出 数 和 性 能 1 
TY 函数 返回 值 ， 神 竖 网 络 输 出 信和 号; 
下 ， 函 数 去 回 值 ， 神 经 网 络 误 莽 ， 
了 车， 函 鉴 返回 值 ， 最 此 得 六 延 退 ， 
兴 三 一 烙 返 回 值 ， 最 终 层 狂 退 。 
需要 指出 的 是 ， 老 数 了 是 可 选 的 。 只 有 当 需 要 明确 昼 皮 网 络 的 目标 时 ， 才 调 周 计 参 数 。 
间 样 ， 寻 和 加 也 是 可 选 的 ， 害 们 只 用 于 存在 输入 延迟 和 层 下 退 的 场 人 。WVW 和 TV 也 是 可 
焉 的 ， 而 且 它们 除了 采用 室 纯 阵 之 外 ， 内 能 失 以 下 范围 中 取 慎 ， 
WRITEP， 请 认 / 吕 试 输 六 信号 ， 
WVWTITVT， 确 认 / 抽 试 目 标 ， 默 认为 疏 
VVEUTVwE， 确认/ 训 试 初始 的 得 六 和 证 退 ， 默 认为 恬 
VVAUTWwAi， 确认 / 员 坛 屋 确 试 迹 退 ， 蒜 认 光 由 
调用 该 函 吉 时 同时 和 寺 行 训 时 过 前 ， 需 要 首先 设 定 实 际 的 训 鳞 函数 ， 吉 
履 trainim 赤 , tmilingdx 等 ,类 后 计 画 南 调 局 相应 的 算法 时间 阁 进行 训 时 . 也 就 是 说 ， 
” 函 喜 tmain 只 是 调用 设 定 的 或 者 莱 认 的 训 续 函 数 峙 网 络 进行 训 夕 - 


了 条 aimb 
总 二 于 全 生 入 宙 作 全 全 人 En 








百世 呈 苦 训 绒 的 神经 疯 络 : 

Pd;， 已 延迟 的 输 六 信和 号， 

Ti: 屋 目 标 ， 

ai 声 冰 的 输入 

总 ; 批量; 

TS 时 间 步 长 ; 

WWi 确认 向 量 戌 者 为 空 筷 阵 ， 
TWw:， 测试 向 量 或 者 为 空 谴 阵 ; 


iD 把 辣 络 惠 论 避 MATLAB 7aw 


NET* 霄 数 逼 回 值 ， 训 虹 后 的 神 冯 网 阁 ; 

TR， 梢 烙 退 回 值 ， 禾 一 步 的 训 虹 记 录 ， 和 包括 ， 
了 民 .epoxch 仿 走 步 底 ， 
TR.perf 一 一 训 练 性 幅 ， 
TRYper 一 一 确认 性 郁 ， 
TR.Iperf 一 一 测试 性 能 ， 

es 训练 停止 后 ， 聚 音 屋 的 条 出 ， 

El， 训练 停止 户 的 层 误 莽 。 

另 晨 ， 训 和 过 前 需要 设 定 以 下 大 监 ， 早 认 值 见 表 2。 





村 32 训 蝶 天数 


| 两 光 且 示 之 同 抽 的 训 隐 和 1 于 最 示 时 取 NaN1 





。。 适 画 戏 并 不 能 被 直接 调用 ，。 而 是 通过 函数 ain 隐 筷 调用 ，tmin 通过 设置 
回 阁 属性 NETirainFcn 约 "iainb "来 调用 iniinb 对 间 振 进行 训 姑 。 





号 上 二 二 全 


2 人 和 





Eee 
rw 


本 ， 引 民雄 的 权 值 窒 阵 【或 SSx<1T 纵 的 阔 值 向 量 )， 
P: 总 组 开放 的 办 六 向 量 ! 咸 豆 诅 单 个 萌生 

Z 扣 组 中 俊 的 松 值 输 六 癌 量 : 

N5 上 组 5 护 的 网 几 输 六 商量 ， 

Ai 总 组 有 纹 的 输 也 癌 量 ， 

T* 六 组 引 维 的 目标 向 量 ， 

BAW，5XR 座 的 性 旗 套 玫 的 梯度 ; 

: 组 3 维 的 性 能 做 数 的 输出 梯度 ， 

LE， 学 习 获 数 ， 考 鲁 有 则 渔 ; 

LS， 尝 司 状 态 ， 币 始 值 误 宝 ， 

diW， 号 扰民 座 权 值 【 勤 交 值 ) 的 变化 矩 阵 ， 

15: 新 的 学 习 状 意 ， 

infi =learmmpfeodej 财 二 同 的 eaode 返回 相让 的 有 用 情 息 ， 和 包括 ; 


及 
| 


人 二 拓 放 地 让 


pmames 一 一 到 加 学 习 宕 类 的 节 称 ， 
Pdsfaults 一 一 亚 回 点 认 的 学 习 考 数 ， 
neede 一 一 如 果 数 使 用 了 BEW 或 4， 则 返回 1。 
由 1earnpnm 
访 函 烙 也 是 一 个 权 值 和 殉 值 学 习 函 数 ， 但 它 在 输入 向 量 的 幅 值 变化 非常 大 或 者 存在 奇 
ait af 0 






基数 含义 可 参见 jcump 

村》 避 全 交 

该 范 数 使 得 神经 网 络 能 鱼 自 适应 ， 调 用 属 式 为 

WEJPEAEHr] = 恒 apitNETPTJPL 内 让 1 


其 中 ， 
NET， 来 自 适 诊 的 坑 经 同 电 ， 
Ei5 网 站 输入 ， 
Ti 网络 目标 ， 默 认 汶 疏 
Fi 韦 始 输 六 延 过 ， 默 认为 让 
Ai 审 始 居 古 退 ， 默 认为 册 
通过 设 定 自 适应 的 亏 数 neLadaptParam 和 自 适 应 的 函数 netadaptFunc 可 调用 庐 函 玫 ， 
着 带 同 如 下 敌 同 。 
met 自 适 庶 后 的 神经 网 络 ; 
Y 同 妆 输 出 
巨 ， 网 络 旭 王 : 
FEf， 报 每 输入 芋 怒 : 
Af 最 经 层 紧 媚 ， 
+ 训 线 记录 【 步 籽 和 性 能 1。 


天 加 下 是 可 迁 的 ， 并 且 只 用 于 必须 指明 网 络 目标 的 场 舍 ， 同 样 ，Pi 和 四 
区 。 是 林寺 的 ， 它 们 只 用 于 存在 栓 入 延 天 和 有 证 退 的 网 络 ， 


看 上 TeWert 
该 函数 用 于 将 更 新 后 的 权 值 和 同性 恢复 世 最 后 ”次 匀 站 化 的 值 ， 调用 格式 为， 
ne io 


如 果 网 络 姑 构 己 经 发 生 了 变化 ， 也 就 是 说 ， 外 果 网 络 的 权 值 和 辣 值 之 间 的 连接 关系 ， 
以 及 蛤 六。 上 图 屋 的 术 度 都 与 原来 的 网 络 结构 有 所 不 同 ， 那 么 该 函数 无 法 将 权 值 和 凤 值 铸 复 
到 原 雍 的 值 。 在 这 种 情况 下 ， 函 整 将 权 值 和 环 值 帮 设 置 为 0， 


22.3 ”神经 网 络 初始 化 函数 


1 init 
该 函数 用 于 对 神经 闻 络 进行 初始 化 ， 调 用 格式 为 ; 


3 


EPE 





其 中 ， 

NET， 到 回 参数 ， 表 示 已 经 初始 化 后 的 神经 网 络 ， 

nell， 和 煌 初始 化 的 神经 网 络 。 

NET 为 net 经 过 一 定 的 初始 化 修正 而 成 ， 修 正 后 ， 前 者 的 权 值 和 逆 值 都 发 生 了 改变 ， 
了 ] iilay 

计 函 数 特别 适用 于 层 一 明 早 构 的 神经 网 络 的 韧 始 化 。 调 用 格式 为 





其 中 ， 
nsi， 特 富 始 化 的 神 多 网络， 
NET:， 柯 始 化 后 的 神 坚 网 络 : 
if = initlaytcodei， 报 所 二 同 的 cade 代码 返回 三 同 的 信息 ， 包 插 
Paames 一 一 所 始 化 数 的 名 称 ， 
全 让 站 则 改 一 一 上 默读 的 朝 闹 化 参数 
通过 指定 神 凤 网 妆 生 一 屋 i 的 韦 冶 化 函 上 央 WETlayers|i 计 来 调用 该 函 烙 ， 韧 始 化 后 的 神 
坚 网 络 上 每 一 层 都 得 到 了 收 正 。 
子 】 诅 让 可 硬 
该 函数 是 一 个 屋 初 始 化 函 败 ， 它 按 周 NEuyen-Widrow 准 刚 对 某 层 的 权 值 和 辣 值 进行 宁 
始 化 。 调 用 格式 为 : 


其 中 ， 
ii 层 贮 壳 引 : 
NET;， 柯 始 化 后 的 神经 网 络 。 
十 证 衣 凤 二 
读 函 数 也 是 一 个 屋 初 始 化 函 整 ， 它 按照 设 定 的 每 县 的 杞 始 化 函数 对 每 层 的 权 值 和 辣 值 
进行 初始 化 ， 调 用 格式 为 





其 中 ， 
ie 桂 官 始 化 的 神 到 网 阁 : 
和 层次 索引 ， 
NET， 制 始 化 后 的 神经 网 丫 ， 

例 半 1 由 据 和 定 的 鳃 六 疝 量 P 和 目标 向 量 T， 剖 建 一 个 感知 器 网 络 ， 对 其 进行 调 练 工 
才 始 化 ， 捧 中 FE 工 站 让 站 看 1 让 T=[DD1。 
MATLAB 代码 如 下 : 






LA| 
= 十 用 攻 时 一 一 本 本 生 





运行 结果 为， 





可 见 ， 在 感知 器 刚刚 创建 ， 尚 未 进行 训练 以 前 ， 权 值 和 闽 值 都 为 0 训 绕 以 后 ， 板 值 
和 靖 值 分 别 为 [1 习 和 -3， 对 训练 好 的 网 络 进行 韧 始 化 后 ， 恢 复 到 以 前 的 值 ， 部 为 D。 


2.2.4 种 经 网 络 输 人 函数 


ti 
该 画 灿 是 一 个 输 A 李 和 函 是 , 它 通 过 茶 基 一 屁 的 加 权 输 六 和 阅 值 相 加 作为 该 屋 的 输 六 。 
调用 格式 为 ; 





其 中 ， 
一 TEL3 1 第 i 个 输 关 ， 它 的 数目 可 以 是 任意 丫 ， 
坦 =Tetsumfderivy， 返 问 的 是 netsom 的 徽 分 函数 dmnetsum。 
321 neiprot 
与 metsum 的 计算 框架 类 做 ， 下 过 该 函数 是 输入 求 积 函 数 ， 它 特 某 一 层 的 权 值 和 交 值 相 
陛 作 为 读 旦 的 输入 。 调 用 格式 为 ; 


3 


三 号 辣 绎 史 ESIMATLAB 5 
TDTETOROROREETT Te “< 
其 中 ， 
EL 第 T 个 输 庆 ， 它 的 玖 目 可 以 是 任意 个 
= metprodiderivJ， 去 回 的 是 metsum 的 油分 函数 dmetsum。 
习 ) ECGTICUT 相 
读 函 玫 的 作用 在 于 使 得 二 来 平一 至 的 权 值 向 量 和 阅 值 向 量 的 关 构 一 琢 ， 以 便于 进行 相 
加 或 想 运算。 调用 格式 为 : 





其 中 ， 


5， 司 21 奴 的 权 值 向 量 ; 
要 达到 一 至 化 所 需要 的 长 订 。 
种 回 值 为 一 个 已 缀 一致 化 了 的 垂 阵 。 
例 立 2 有 两 个 加权 输 六 向 量 ，ZlL 和 Z2， 试 调用 函数 melsum 将 两 者 相 如 ， 调 用 etprmad 
将 两 者 相 梯 ， 
2 站 








由 此 也 可 以 大 出 wetsam 和 netprod 的 运 竺 规则 ， 就 是 将 权 值 和 疯 值 向量 中 对 应 的 元 于 
相 加 或 相 柔 。 同 时 也 显示 了 函数 concur 的 运行 机 理 ， 即 收 正 后 的 矩阵 就 是 由 向 量 的 副本 组 
台 而 成 的 。 


22.5 神 既 网 络 传递 函数 


忧 弟 数 的 作用 是 将 神经 网 络 的 输入 转换 为 给 出。 
17 ardlinm 
该 函数 为 硬 限 由 传递 秀 数 。 调 用 格式 为 






Fr 
N， 某 层 的 口 组 5 纵 的 输入 向 量 ; 
A， 王 回 该 旦 的 输 也 向 量 。 当 >0 时 ， 返 回 值 为 1， 当 Na0 时 ， 返 回 值 为 0。 


人 上 
证 和 大 bandlindceodei 根据 不 同 的 代码 sade 返回 不 同 的 信息 ， 香 括 : 
dernv 一 一 尘 几 函数 名 称 ; 





mame_ 传递 函数 的 全 称 ; 
uipu 一 一 传递 函数 的 输出 范围 ， 
active 传递 函数 的 输入 范围。 
法 函数 的 原型 务 青 为， 
Di 
himto)=|0 mn 
可 通过 特 NETlayersliltransferFen 设 定 为 hardlim' 来 调用 该 函 餐 ， 这 接 是 
了 神经 同 络 中 第 1 层 的 传递 函 乾 。 
卫 外 IardLimiE 


该 函数 为 对 称 的 而 限 幅 忧 递 函 数 ， 调 用 格式 为 ， 





其 中 ， 
N， 基 层 的 所 给 号 奴 的 输入 向 量 : 
上 画 数 返回 值 ， 当 NesU 时 ， 和 返回 值 为 1 当 Wen 时， 返回 值 汶 = 1s 
铂 友 = fandlinmsieode) 人 的 齐 训 请 瑚 见 hardlim。 

该 函 灼 的 原型 函数 注 : 


IE | EU 
handlios(=| 
由 此 可 更， 以 上 两 企画 草 可 以 密 现 神 到 网 络 的 分 类 和 关 断 功 卓 。 


例 立 当 简 用 LATLAB 给 出 一 个 数组 调用 函数 hardlim 与 hardlinma 对 其 进行 分 类 ， 
MATLAB 代码 如 F:， 





ET 和 上 
村 合击 


代码 中 的 函数 plot， 读 者 可 参 隔 MATLAB ? 的 帮助 进行 学 习 ， 在 此 不 再 玖 还 。 运 行 结 
果 如 图 也 1 所 示 ， 

图 中 实 点 部 分 是 函 袁 hardltims 的 芬 灶 丫 果 ; 圆 玫 部 分 是 hardtiim 的 分 类 结果 ,可 以 看 出 ， 
两 个 函数 克成 功 地 对 吏 组 进行 了 分类 . 


] 








- 明 


ET 站 
图 31 利用 传递 函 航 进行 分 类 的 运行 结 时 


且 


226 其 他 重要 困 数 


1 dtprod 


该 函数 用 于 对 权 值 示 点 积 , 它 求 得 权 值 与 恰 入 之 间 的 点 积 作为 加 权 输 入 。 调用 格式 为 ， 









其 中 ， 
W: S 基 民 挫 的 权 值 算 阵 ; 
FE: 如 组 民 锥 的 输 六 向 量 ; 
z: 内 组 只 挫 的 凤 与 中 的 点 各 
邮 =datprodldernivi 返回 琐 台 的 导 琢 。 
例 衬 4 建立 两 个 垂 阵 【 或 向 量 1， 演 示 函 数 dotprod 的 蕊 能 ， 


- 
下 UL 
Am 一 





2.3 ”感知 器 的 神经 网 络 工具 箱 函 数 


感知 蝇 网 妆 是 由 生 国 计算 机 料 学 家 罗 林 布 拉 特 于 1957 年 可 出 的 。 从 某 种 意义 上 讲 ， 如 
各 器 可 以 说 是 量 早 的 人 工 和 神经 网 络 ， 单 屋 感 知 器 是 一 个 具有 单 层 神 凤 元 。 采 用 阅 值 激活 函 


驻 
| 


天 


散 的 前 向 网 络 。 通 过 对 网 络 权 值 的 训练 ， 可 以 使 感知 器 对 一 诅 输 入 先 量 的 响应 达到 元 素 为 
0 或 1 的 目标 输出 ， 从 而 实现 对 输入 所 量 进行 分 类 的 目的 。 

MATLAB 7 的 神经 网 络 工具 硝 中 提供 了 大 量 的 感 各 器 函 歼 ， 下 面 我 们 将 对 这 些 函 数 的 
功能 、 调 用 格式 ， 使 用 太 法 及 注意 事项 作 详细 说 咀 ， 

常用 的 感知 露 函 蚊 见 表 2-3。 


吉 23 三 知 器 常用 函 要 


| “本 禾 机 划 | 恒 且 妆 称 | 前 机 用 证 | 
喇 姑 冲剂 填 函 必 | aesg | 刘 厅 一 个 三 如 县 网 续 
| as | 在 圈 丁 向 量 亲 中 让 所 处 齐 杜 
em am 


此 和 吐 短 味 的 允 点 向 量 和 旧时 向 凰 


| 放 林 | ma | 平 抽 对 讽 提 请 机 





可 通过 感知 时 生成 函数 来 创建 一 个 感 馈 器 ， 并 且 可 对 壤 知 器 进行 初始 化 ， 情 真 和 训练 





st 于 创建 - ns 调用 格式 为 ， 


et 函数 返回 套数 ， 雪 示 生 成 的 盛 鳃 器 网 络 ; 

Tiei=newps 表示 在 一 个 对 话 赋 中 定义 感知 回 的 属性 ， 

Pr: 一 十 民 共 二 的 短 阵 ， 直 民 租 输入 向 量 的 最 太 值 和 最 小 值 组 成， 

8 粮 经 元 的 沾 蚊 ， 

呈 ， 盛 知 器 的 传递 函数 ， 可 选 参数 为 Handlian 用 | Htardliins， 上 认 湖 iardlinis 
二 盛 知 中 的 学 习 函 融 ， 可 这 参 蚊 为 leamp 和 leampn， 默 认 情 况 下 沟 Iamips 


23.2 显示 困 烙 


1) 分 界线 综 制 函数 pletpe 
二 和 起 轩 属地 





三， 号 区 虹 条 前 奶 权 短 阵 〈 玉 齐 绒 小 于 等 于 了 

hy 总 革 圭 瞪 的 畔 向 量 ; 

he 最 后 面 线 的 控制 权 : 

Ratpefw:bii 各 回 的 是 对 所 绎 制 芝 界线 的 撑 全 | 根 * 
PilotpefWjhuh)j 用 于 在 络 制 断 线 之 前 检 查 直 亲近 制 的 分 界线 。 


二 
HE 


SEEgIEOSMATLAB:7ioi5:2211 


从 和。 访 本 妆 一 盘 在 plotpv 本 数 之 后 调用 ， 而 且 并 不 改变 现 有 的 从 标 向 标准 ， 


21 输入 /目标 向 量 给 制 函 数 plotpv 
该 函 数 用 于 终 制 感知 器 的 输入 向 量 和 目标 向 量 ， 调 用 格式 为 ， 





其 中 ， 
上 心 姐 品 拖 的 贡 目标 向 量 , 
和 [六 面 潮 寺 ia9_minw_maxl 图 形 的 后 大 值 ， 反 制 工作 必 有 并 位 于 Y 所 限定 的 范 
围 中 ; 
plotpwipjj， 以 1 洛 标 尺 ， 蛙 制 的 列 向 量 ， 
plotpvtptvj; 在 的 范围 中 绘制 p 的 列 向 量 。 
例 2.5 本 例 的 主要 目的 在 于 往 示 函数 plotpe 和 plotpy 的 应 用 。 
慨 定 已 给 出 了 某 感 知 器 的 输 六 变量 忆 和 目标 变量 上 择 制 其 曲 斌 ， 业 后 毕 定 感知 器 的 权 
值 和 逆 值 ， 皖 制 其 分 界线 ， 
MATLAB 代码 如 下 ， 





其 中 ， mininax 为 数学 函数 。 本 例 中 mnaitp 和 各 下 1 
运行 站 果 奇 图 2 所 未 。 


| 


R 
1 


ee 名 梧 和 


图 3.3 函数 Plate 和 apy 请 示 十 行 由 时 
23.3 性 能 本数 


17 性 能 表 教 而 下 






全 有 


谅 函 数 以 平均 绝对 误差 为 蕉 刚 ， 确 定神 经 网 络 性 能 的 函数 ， 调 用 格式 为 ， 





其 下， 
et 误 葵 向 量 矩 阵 “ 或 向 量 )， 
xi 所 有 的 权 慎 和 疝 但 向量， 可 卸 略 ; 
FF 性 能 参数 ， 可 伯 栈 ; 
me 等 评 定 的 神 缀 网 归 ; 
梧 叶 函数 的 种 回 值 ， 大 平均 名 对 课 莽 ， 
maefcodej， 根 据 eole 值 的 在 同 ， 返 回 不 同 的 信息 ， 和 包括 : 
defiv 一 一 返回 导数 画 监 的 名 称 ; 
ruite 一 一 返回 函数 全 称 ; 
paames 一 返回 训练 参 鉴 的 和 名称 ， 
pdefauls 一 一 返回 默认 的 训练 参 覆 。 
例 半 上 感知 器 最 重要 的 也 是 最 实用 的 功能 是 对 输入 向 量 进行 分 类 。 本 例 党 试 建立 一 个 
感知 明 模 型 ， 实 现 电路 中 “或 ” 门 的 翅 盘 ， 从 而 实现 对 输 六 的 分 类 。 
* 可 ” 门 输入 /输出 见 表 24， 由 此 可 得 出 网络 的 输入 向 量 P 和 目标 向 量 T， 其 中，P= 
IDoiuolo: Test 





本 例 的 MATLAB 代码 为 















由 些 可见， 感知 加 在 训练 以 前 的 输出 是 平 特 间 要求 的 ， 皮 过 站 玖 训练 后 的 输出 已 经 和 
目标 向 量 一 致 了， 训练 过 程 的 误差 曲线 绍 图 23 所 示 。 

本 例 刨 建 的 感知 器 只 有 一 个 村 经 元 ， 这 里 也 特 间 了 神 竖 网 络 的 被 计 顾 则 ， 即 在 设计 神 
泽 网 妆 时 ， 在 同 桦 可 以 完成 任务 的 情况 下 ， 尽 量 采 用 简单 的 知 构 。 国 为 类 构 简 单 的 神 既 网 
结 计 算 人 负担 轻 ， 运 行 速度 一 般 比 较 忌 。 感 知 吕 的 忧 通 函 效 和 学 习 函 数 都 采用 莱 认 值 ， 分 别 
尖 bandlinm 和 emnp， 这 国 为 网 络 的 输出 力 由 1 的 三 值 站 构 ， 只 有 采用 Tardlim 才 请 足 要 求 ， 
输 具 向 量 申 下 存在 奇异 值 ， 元 素 之 间 的 距离 也 比较 小 ， 国 此 ， 采 用 leamp 就 是 避 了 。 


[ss 





国 33 训 纺 过程 的 天 音 曲 斌 

利用 tmainc 函数 对 同 妾 进行 调 练 , 如 蝶 的 结果 非 常 再 想 , 训练 后 的 网 络 成 功 实现 了 “或 ” 

功能 ， 利 用 平均 绝对 误区 函数 mae 计算 同 阁 的 性 能 ， 绪 果 为 0， 从 另 一 个 方面 谨 明 了 网 络 
的 性 能 是 非常 好 的 。 

利用 自 适应 函数 adapt 同样 可 以 达到 调 练 的 效果 。 采 用 以 下 的 代码 对 网 络 进行 调 陈 : 






网 络 的 输出 为 ， 


训练 过 程 中 采用 mas 函数 来 祥 到 网 络 误 头 ， 以 此 作为 有 是否 停止 训 蝶 的 标准 。 此 时 的 网 
洗 输 出 和 入 面 的 一 致 ， 国 此 ， 果 用 这 种 方式 对 网 络 进行 训练 是 恨 成 功 的 。 

例 之 7 示例 的 目的 在 于 葡 示 标 难 学 习 函 莉 learmpn 的 应 用 。 要 求 建立 一 个 感知 如 网 络 ， 
对 一 组 存在 奇异 值 的 输入 向 量 P 进 行 分 类 。 

网 阁 的 输入 向 量 怒 和 目标 向 量 T 分 别 为 ! 


各 
TI 









吓 示 用 哩 区 = 下 


其 中 ，T 表明 了 输入 向 量 的 分 类 情况 。 输 入 的 向 量 分 布 如 图 3.4 所 示 ， 其 中 的 一 个 从 
标点 与 其 他 点 的 距离 都 很 大 ， 而 另外 三 不 点 相对 比较 集中 。 因 此 ， 输 入 向 量 中 存在 奇异 值 。 

1 本 

芭 

可 

唱 务 襄 坪 语 量 可 
是 
图 + 输 六 向 量 芝 布 














国 ， 


训练 过 程 中 的 误差 曲线 如 图 :5 所 示 。 可 见 ， 网 络 的 训练 过 程 出 现 了 振东 ， 而 且 训 钴 
次 数 也 比较 多 。 

训练 得 到 的 分 类 线 如 图 2.6 所 示 ， 由 于 奇异 值 的 存在 ， 样 过 点 相对 比较 华中 ， 因 此 无 
法 看 出 网 络 的 分 类 性 能 。 接 下 来 将 局 部 放大 ， 检 查 网 阁 的 分 类 性 能 。 代 码 如 下 


局 部 放大 后 的 分 类 线 如 图 2.7 所 示 ， 两 类 样本 点 中 分 别 有 一 个 位 于 分 类 线 上 ， 由 此 可 
见 ， 输 六 样 于 中 的 奇异 点 对 于 网 绍 的 分 次 性 能 尺 响 很 友 。 


下 


1 1 种 经 网 络 本 SIMATLAB :7xm 


入 丰 下 = 


PE 本 和 齐全 号 5 时 恒 全 








人 


_ammees | 交 生 二 
图 2.5 神 乡 课 茎 向 堪 


RE 咯 达 了 二 和 本 
9 


1 曙 


站 
面 
机 重 日 面 | 上 男 别 
Pi 
图 6 训练 得 到 的 分 贡 俄 
动 和 加 吨 [E 二 Ed 
[1 
了 
[ 汪 
齐 重 
柯 昌 
于 
-1 局 
| 


图 237 局 上 部 放 夫 局 的 分 类 托 


二 


| 





1 二 和 
以 上 和 棉 码 创建 的 感知 器 的 学 习 画 吉 为 Isaap， 接 下 < 雯 利用 标 鸡 训练 务 数 jeampn 必 为 网 
络 的 学 习 函 数 。 除 感知 器 创建 代码 有 区 别 外 ， 其 佘 的 全 部 一 致 ， 代 码 为 : 
同族 的 调 儿 误差 昌 战 和 姑 图 33 所 示 ， 由 图 可 见 ， 闪 妾 如 过 三 成 学 习 后 性 能 汶 避 ， 相 对 
于 图 2 中 的 别 密 ， 网 络 的 训练 时 间 有 了 所 闫 少 。 
此 时 网 妆 得 到 的 分 类 线 划 图 2.9 所 示 ， 可 见 此 时 的 分 业 线 比 图 2.7 审 的 分 类 乒 更 轴 玲 
确 ， 两 娄 样 本 点 态 准 确 地 分 开 ， 


PerierTrarEa 十 各 , 石 5i 滞 旋 


图 38 网 络 的 训 峰 误 基 曲直 


二 21D9S be te 二 tagit53 


刀 =. 忆 博 机 要 和 有 要 1 1.5 蚂 
全 1 


图 2 号 网 纤 得 到 的 局 部 旋 去 后 的 外 村 线 


4 


风头 可 辣 到 本 玫 SNMATLAB 7 
2.4 BP 网 络 的 神经 网 络 工 具 箱 函 数 


BP 辣 终 的 全 称 为 Back-Propagation Network， 邯 反 向 传播 网 络 ， 除 非 有 特别 广 明 ， 本 
书 中 一 要 使 用 BP 网 络 作 为 反 向 传 搬 网 阁 的 简称 。 

BP 网 络 是 利用 非 线性 可 微分 函数 进行 权 值 训练 的 多 屋 网 络 , 它 包 舍 了 神经 网 络 理论 中 
最 为 精华 的 部 分 ， 由 于 其 结构 简单 ， 可 塑性 强 ， 故 在 函数 通 近 ， 异 式 识别 信息 分 类 及 区 
据 压 端 等 领域 得 到 了 广泛 的 诬 用 。 特 别 的 ， 由 于 它 的 敬 学 意义 明确 ， 学 习 算法 步 台 分 明 ， 
使 得 序 用 背景 更 加 广泛 。 

MATLAB 了 补 经 网 络 工具 精 中 外间 了 许多 用 于 BE 网络 人 区 析 与 设计 的 函数 ， 本 节 特 详 
量 说 明 这 些 函 数 的 功能 。 调 用 格式 。 天 灼 特性 和 注意 事项 等 。BP 网 阁 的 常用 函数 如 要 2.5 
所 示 。 

要 25 BF 网 馈 的 常用 函数 可 

| 订 生 本本 一 [本 是 有 页 | 一 二 画 可 看 动 | 
| -newef “| 他 寻 如 征订 疝 络 
曾 商 网 络 创 奸 顽 生 
| eegi | 全 吕 丰 在 内 入 地 的 WE | 



















| | 的 叶 量 函 玫 
gagsig | lagsig 的 导 卉 竹 






中 型 的 正名 务 考 


2.4.1 BP 网 络 创建 卫 数 


1 









证 业者 至 呈 
Fei= IEewef 用 于 在 对 话 杠 中 创建 一 个 百 P 网 络 ， 
PR 由 每 组 输入 工具 有 民 组 畏 六 ) 元 素 的 最 大 值 和 最 水 值 组 成 的 民 X2 座 的 炬 阵 ， 
8is 第 宇明 的 长 度 ， 共 计 NI 屋 ， 
TFi 第 1 层 的 导 道 本 数 ， 默 认 询 “tnaig” 
BTF: BP 网 党 的 调 妹 函 竖 ， 默 认为 “raimtime 3 
BLF， 权 值 和 阅 慎 的 BP 学 习 算 法 ， 屿 认 汐 “eingdim 
PF， 辐 妾 的 性 能 了 落 ， 和 默认 为 二 而 本 ”5 
考 数 TFi 可 以 采用 任意 的 可 氢 封 递 画 献 ， 比如 tansig .logsig 书 purelin 等 ; 
注 各 训 昧 函 拖 可 以 是 任意 的 到 P 训 计 了 画 慰 ， 胡 Tainm，trainbfg， rainip 记 triinedl 
芋 . 慎 措 出 的 是 ，BTE 点 认 来 用 imainlm 是 因 上 该 范 加 的 达 度 很 掉 ， 恒 秆 画 
上 的 一 个 重要 缺 陪 是 运行 过 程 党 消耗 志 量 的 内 站 丙 源 ,如果 些 的 计 和 工 相 内 看 下 
战 去 ， 平 建 议 六 用 BTF 的 电 认 未 乒 trainlm， 而 建议 采用 训 儿 函数 trainbfe 成 
irainrp， 圣 盐 这 两 洒 函 就 的 这 行 计 广 记 较 避 ， 醒 它们 的 共同 特点 是 内 看 占用 量 
_ 中， 环 重 于 出 现 训 练 过 程 死机 的 情况 ， 


量 卫 和 到 嫩 证 

读 函 数 用 于 创建 一 个 BE 网 络 。 调 周 检 式 为 ， 
三 .1 75NILTTELTEZ TENILETEBLRRFP) 

捧 中 ， 
mets newfi， 用 于 奉 对 话 枢 中 创建 一 个 百 F 网络。 
其 他 过 数 音 六 请 乞 见 函 燥 newef。 

了 Pd 

该 函数 用 于 创建 一 个 存在 输 大 延迟 的 前 向 网 络 。 调 用 格式 为 ; 
看 刘 可 Wid 

其 晶 ， 
NET=NEWFFTD， 用 于 在 对 话 框 下 记 建 一 个 BF 网 络 。 
其 地 村 蚁 语 请 驮 见 古 和 cf， 


2.4.2 ”神经 元 上 的 传递 函数 


个性 函数 是 BP 同 此 的 重要 组 成 部 他。 心 遂 函 数 闷 称 为 汶 畦 函 数 ， 电 颁 是 连续 可 微 的 。 
BF 间 络 妈 常 采用 号 型 的 对 玫 或 正切 画 数 和 线性 函数 ， 






1 》 | 
读 忧 递 函 数 为 3 型 的 对 数 函 数 。 调 用 格式 为 ， 
ee 人 = 
下 we 妈 亚 和 全 SS “本 -| 


其 中 ， 
Nt 总 个 3 维 的 苯 六 列 向 量 ， 


JS 辣 儿 本 SNMATLAB 7Zxw 
a& 函数 返回 值 ， 位 于 区 间 1,17 中 ， 
info = logsigfcodej， 情 据 code 值 的 不 同 返回 不同 的 信息 ， 包 括 ; 
denv 一 一 谴 回 油分 函数 的 和 名称: 
name 一 一 诞 回 函 烛 伞 称 : 
nutput 一 一 返回 输出 值 域 ， 
ative 一 一 运 回 有 效 的 输入 区 间 ， 
下 面 尼 ”组 何 单 的 代码 严 生 一 个 对 数 号 型 的 传道 本 攻 狼 便 : 





运行 结果 如 图 二 10 所 示 。 可 见 ， 函 数 logsig 可 将 神经 元 的 输 关 【范围 为 尾 个 实 委 全) 
殴 射 到 区 间 (0.1) 中 ， 叉 由 于 该 函数 为 可 航 函 数 ， 因 此 非常 适 各 于 利用 BP 靠 法 训练 神经 
网 络 。 


MATLAB 7 按照 此 末 式 的 画 款 科 计 算 对 喜 忧 遂 函 娄 的 值 : 
篇 mi= 3(+exp(-2n))， 


aa) 


图 2-I0 Icesie 函数 运行 由 果 






省 攻 为 aesie 的 恒 调用 格式 为 ; 
小 二 -2 


N: 8XxG 座 网 络 输 六 ; 
上 写 区 间 维 网 阁 输出 * 
Ad 函数 返回 值 ， 输 出 对 铀 六 的 导数 。 





得 一 MATLAB 7 壕 照 此 形式 的 画 讨 条 计算 时 数 尾 通 画 孝 的 值 : 了 二 让 人 一 ) 





例 乞 8 现 有 某 BP 网 络 某 尾 的 3 个 神经 元 ， 其 传递 函数 均 为 8 型 的 对 数 函 数 ， 试 利用 


本 面 面 
TS 


本 丁 画 画 面 3 二 于 
人 


函数 diogsi 求解 输出 对 和 输 大 的 导数 ， 
_MATLAB 代码 如 下 : 












3) 本 二 
该 和 数 为 双 曲 正切 $ 型 传道 函数 。 调 用 格式 为 





其 申 ， 
Ni 日 个 S 旨 的 输入 列 向 量 ， 
Ai 范 数 玛 回 值 ， 位 于 区 间 -1,.17 之 间 。 
这 个 二 ansigieade 首 和 言 辫 请 区 风 inf = Imogsigfecadej。 
以 下 代码 可 绘制 一 个 观 晶 正切 $ 型 忧 递 函 数 ， 





ee 
度 ， 用 
证 棕 王 = 二 
中 





和 本 机 站 二 
基 证 惠 = 国 


篇 NATLAB 7 按照 此 形式 的 函 就 来 计算 该 允 面 正切 情 递 画 训 的 值 : 
= 了 +exp( 人 -2 一， 

二 )〗 二 ga 时 民 

衣 半 和 抽 必 玫 本人 人 人 






各 蠢 数 的 意义 请 参见 dlogsig， 其 原型 函数 为 了 = 1 一 交 


瑟 ]】 Enelin 
庐 函数 为 线性 传递 函数 。 调 用 格式 为 ， 





其 趾 ， 


Ms 全 个 哇 座 的 输入 列 向 量 ， 

Ai 阔 效 返回 值 ，A=N 

证 名 = purelintcode) 的 音义 请 窗 见 info = logsigfcodie)。 
下 面世 一 组 昔 单 的 代码 产生 一 个 线性 $ 型 传送 函数 为 例 ， 








图 也 民 aeln 表 数 运行 结果 





和 伐 r MATLAB 了 接 照 此 形式 的 了 画 喜 条 计算 函 南 Purelin: 站 = 半 。 





再 durelin 
谅 函 燥 为 purelin 的 层 函数， 调用 赂 式 为 


各 多 数 的 告 义 请 参见 dogsig， 原 型 函数 为 常数 函数 x=1 。 


各 
| 


下 有 而 二 二 下 天语 林 王 
客人 一 二 本 人 


24.3 BP 网 络 学 习 国 数 


1 TearmBg 卉 
该 函 曲 为 梯度 下 降 权 值 / 几 值 学 习 函 数 ， 它 通过 可 经 元 的 输入 和 误差 ， 以 又 权 值 和 效 值 
的 竺 习 速率 ， 夷 计算 权 值 或 阅 值 的 变化 率 ， 调用 格式 为 : 


ne 





品 。， 5 区 民 即 的 极 值 写 阵 ; 

hb: 号 内 的 阅 值 向 量 ; 

二 崩 R 维 的 输入 向 量 : 

es 人 LO 产生 一 站 总 印 的 输 拓 向 量 ; 

z: 总 组 弛 维 的 如 权 输 入 向 最 ， 

N 总 蛆 引 维 的 输 大 向量; 

ai 组 号 维 的 输 击 向 量 : 

T: 间 蛆 弛 座 的 尾 目 标 向 量 ; 

E: 总 望 S 认 的 屋 误 莽 向 量 ; 

有 册 与 性 能 相 英 的 8XR 维 梯 讼 ; 

EA 与 性 食 相 革 的 3X 民 挫 输 出 梯度 ， 

DSS 座 的 昼 经 元 上 距 离 生 阵 ; 

二 BE:， 学 习 奢 监 ， 可 通过 该 套数 设 半 学 习 速 率 ， 世 置 格式 如 LED01; 
LS 学 习 状 坊 ， 初 妈 杖 过 下 为 室 ; 

Wi， 号 区 民 烛 的 权 值 或 阅 慎 变化 率 矩 阵 ; 

db 驴 崔 的 赣 值 变化 率 向 量 ; 

上 :新 的 学 习 执 态 ， 

lsarmgdieodei 根据 不 同 的 code 值 返回 有 薄 函 数 的 再 同 信 息 ， 包 丘 : 


paames 一 一 返回 设置 的 学 习 参 遇 ; 

Pdefuls 一 一 返回 周 认 的 学 习 参 数 ， 

Need 一 一 旭 果 函数 使 用 了 BEW 或 ， 则 返回 1。 
21 leamedm 


该 函数 为 梯度 下 降 动量 学 习 函 数 ， 它 利用 神经 元 的 输入 和 误差 ， 权 值 或 贱 值 的 学 习 圳 
率 和 动量 常数 ， 米 计算 权 值 或 效 值 的 变化 率 。 调 用 格式 为 ， 


到 本， 机. 












各 参数 的 售 义 请 参见 leamgd。 
僵 -。 冰 至 党 姑 me 是 通过 学 习 参 就 LP 设置 的 ， 格 趟 为 pme= 08， 


划 9 
Er 


Di 同 络 是 也 己 MATLAB 了 yw: 


2.44 BE 网 络 训练 二 数 


1) trmainbfe 
读 函 败 为 BRGS 准 牛 顿 BP 算法 函 归 。 除了 BP 网 络 外 ， 访 函数 也 可 以 训练 任意 形式 的 
站 全 二 全 全 和 二 nn 二 二 二 调用 格式 为 ; 





Pd:， 有 攻 退 的 输 关 向量; 
Tl， 屋 路 目标 向 生 ， 
个 ， 批 量 ， 
TS 时 间 步 长 ; 
Www， 砚 届 向量 站 构 或 者 为 宝 ， 
TVw， 栓 驴 向 量 蛙 构 或 看 为 宇 : 
net 训 蝶 后 的 坑 经 网 绍 ， 
衣 :， 丢 睹 如 贬 的 有 甘 信 息 记 录 ， 和 括 ; 
TREEPaeh 一 一 时 剂 点 ; 
TRJper 一 一 训练 性 能 ; 
TRvperf- 一 确认 性 能 
TRiperf 一 检验 性 公 。 
Ag 上 一 步 如 练 中 到 合 尾 的 输出 ， 
El ， 上 一 步 如 蝶 中 的 屋 这 误 莹 ， 
infa = trainbfefcodelj， 根据 不 同 的 code 值 返回 不 同 的 有 藉 tmainbfe 的 作息 ， 包 播 ， 
Paames 一 一 运 回 设 定 的 训练 对 束 : 
pdefauls 一 一 返回 球 认 的 训练 参 葱 。 
在 利用 访 函 教 进行 BB 同 络 训 儿 时，MATLAB 7 已 经 默认 了 以 下 训练 大 数 ， 如 天 36 
了 所 示 


惠 26 BP 网 绪 销 几 具 贤 


wewesrenee FE 

下 丰 下 于 
本 工 

ER 和 于 下 于 


调 走 有 时 间 ， 订 表示 骨 站 时 间 不 二 





人 
1 
法 函数 为 梯度 下 降 BP 算法 函 政 。 调 用 格式 为， 


AR 
站 入 天 和 基 必 如 二 ai- 


其 参数 意义 、 设 置 格式 和 适用 范围 等 请 参见 tminbfz。 










3 tmaingdm 
访 函 数 为 梯度 下 降 动 量 BP 算法 函数 。 调 用 格式 为 : 


ou 


此 外 ，MATLAB 了 的 神 皮 网 络 工 具 菠 申 还 有 一 票 列 训 蝶 函 元 可 用 于 对 BF 网 络 的 训 绒 ， 
限 手 篇 晤 的 原 国 ， 我 们 在 此 以 表格 的 带 式 将 它们 表示 出 来 ， 见 表 37。 读者 可 以 出 原 范 数 
imainth 生 的 调用 格 或 进行 学 习 司 用 。 


村 37 其 他 镍 几 函 数 


AAS 







ays 机 苑 屁 BF 训 凡 函数 


篇 以 上 这 些 训 妹 函数 不 仅 可 用 干 BP 间 结 的 训练 还 利用 于 其 他 任何 神 星 网 
峰 ， 只 要 其 传递 阻 数 时 于 权 值 和 国 值 看 在 导 函 数 即 可 - 


245 性 能 琴 数 


| 荐 呈 1 


该 衣 数 为 均 方 误差 性 能 函数 ， 调 用 格式 为 ， 


1 每 
于 在 E 本 二 人 证- 站 三， 二 








各 大 监 舍 闵 请 做 见 mae。 

了 iDEBETE 加 

该 函 青 也 是 性 能 函数， 它 通过 两 个 因子 的 加 权 和 来 评价 网 络 的 性 能 ， 这 两 个 因子 分 别 
是 均 方 误 兰 、 均 方 权 值 和 阔 值 调用 格式 为 : 






3 人 


各 基数 舍 义 请 参 风 me 
在 使 用 庆 函 数 前 ， 雷 要 设 二 性 能 大 数 pp， 格 或 为 PPratio=0.3， 访 参数 的 

意 世 是 误 差 相 时 于 权 值 和 间 值 的 重要 性 .这样 一 条， 本 数 的 到 回 值 = 均 方 误 总 

< PRratio+ 均 方 权 值 和 国 值 = PRratio。 

和 例 2.9 创 填 一 个 BP 网 络 ， 并 评估 其 性 能 。 

代码 如 下 ; 








运行 结果 为 





246 显示 函数 


1 Pilotpet 
该 函数 用 于 给 全 网 络 的 性 人 能， 调用 格式 为 :_ 





上 
其 中 ， 

5 网络 训练 记录 ; 

goal; 性 紫 目 标 ， 默 认为 NaNi 

name+ 刘 詹 函数 和 名称， 默认 为 空 ; 

epoch， 训 练 步 数 ， 对 认 为 媚 练 记录 的 长 认 。 
函数 除了 可 以 星 制 网 络 的 训练 性 能 外 ， 还 可 以 绘制 性 能 目标 、 确 试 性 能 和 检验 性 施 。 


到 


1 信人 二 种 店 | 


当然 ， 前 提 条 件 是 它们 都 存在 
这 里 有 一 个 输入 问 量 P 和 目标 向 量 T， 分 别 有 总 个 向 量 - 由 此 导出 一 组 确认 样 率 ， 芬 
别 为 ; 





创建 一 个 BP 网 络 ， 并 进行 名 锋 ， 技 出 P 和 下 之 间 的 非 线性 美奈， 并 利用 确认 样本 对 
网 络 进行 检 驻 。 








_ 网 络 的 训练 误差 曲线 如 图 3-13 所 示 ， 训 练 结果 为 





在 训练 过 程 中 ， 直 接 调 用 plotperf 函数 显示 网 络 的 训练 记录 。 当 乒 ， 也 可 以 直接 仙 用 
人 iotperf 绽 制 网 络 的 训 笑 记录 ， 显 示 钻 音 与 图 2.13 是 一 致 的 。 


HT 站 LOG 村 本， 和 al 庆 癌 ;| 


1 


En 
疼 13 网 络 的 训 蝶 记 景 
字面 iDtES& 
读 函 者 用 于 痊 制 一 个 单 玫 宰 到 元 的 误 蓬 曲面。 调用 格式 为 ， 
RAT SEE 
其 中 ， 
王 ws 权 值 的 M 公 行 向 量 ; 
bw ML 挫 的 阔 值 行商 量 ; 
esi 误 划 商 量 组 成 的 可 基 N 锥 证 阵 ， 
Wi 视角， 默认 为 [-37.5,， 30]。 
函数 绽 制 的 误 莽 曲面 圈 是 由 权 值 和 效 慎 确 定 的 。 由 函 燥 emsurf 计算 得 出 的 。 
3 plotep 
该 函数 用 于 绽 制 权 值 和 阅 值 在 误 芭 曲面 上 的 位 置 。 调 用 格式 为 : 


53 
IE 


Wi 当前 权 值 ; 

65， 当前 阅 值 ; 

h， 概 村 和 环 值 在 上 一 时 乾 的 位 置 售 息 向 量 ， 
下， 当前 前 权 值 和 阅 值 位 置信 息 问 量 ， 


在 整 沾 络 制 过 程 中 ,月 可 以 看 伍 一 个 “ 必 时 ”在 储 变量 。 在 绘制 断 的 权 值 
和 阅 值 位 置 之 前 , 日 福清 除 ; 在 给 制 后 , 日 记录 了 本 次 要 值 和 国人 的 性 置 入 息 ， 


二 ETTSDTE 
此 函数 用 于 计算 单个 神经 元 的 误 关 曲 面 。 调用 格式 为 
天 = emeauif 最 耻 WWBWVR 2 
其 中 ， 
E， 输 六 行 向 量 ; 
了 ， 目 标 行 向 量 
友 V: 权 值 列 疝 量 ， 
理 W， 间 慎 列 向 重 ， 
F， 心 道 函 数 的 名 称 ， 
神经 元 的 误差 曲面 是 由 极 导 和 赋 值 的 行 向量 确 定 的 
F 面 的 一 组 代码 可 以 分 析 一 个 BP 网 阁 中 斯 个 神 缀 元 的 误 篮 ， 并 蛤 制 出 其 误区 曲面 与 
索 廊 线 。 


让 喜 上 条 丰 1 于 让 环 站 站 于 1 4 而 4 本 让 ， 
证 人 风机 加 上 03 二 TO 

CE 

5 





人 = TEMPJLWYWbw ngst 
Platealwalealen 3 
证 行 站 旺 各 图 天 1 直 所 本 


[| [| 
汪 





5 “和 
| 


围 3i4 和 宴 闫 曲面 和 办 亡 贱 


II 
例 2.10 BP 网 络 的 一 个 重要 功能 就 是 非 线性 映射 的 能 力 ， 这 一 功能 非常 适 各 于 函数 通 


近 等 ， 也 就 是 说 ， 找 出 两 组 数据 之 间 的 关系 。 相 例 给 出 铀 六 向 量 和 目标 向 量 T， 建 立 一 
二 网 络 ， as P 和 了 之 问 的 甘 系 ， 





可 见 ， 网 络 的 中 全 必 有 和 个 神经 元 ， 伟 带 甬 为 tans 讶 ;输出 层 有 1 个 神经 元 ， 忧 弟 
函数 为 punelins BP 网 络 中 间 层 神经 元 的 惑 目 对 网 络 性 能 有 着 比较 大 的 影响 ， 需 要 通过 不 断 
地 尝试 才能 确定 ;由 于 设 有 特别 设 定 调 练 函 数 ， 因 此 调 练 函 数 取 默认 值 wainlm:。 

2-15 中 的 “so” 表 示 对 训练 前 的 网 络 进行 仿真 得 到 的 输出 ， 直 线 表 示 输 入 向 量 和 目 
标 向 量 之 间 的 范 数 关 系 ， 由 此 可 见 ， 在 训练 以 前 ， 网 络 的 非 厂 性 葡 射 性 能 是 很 差 的 。 


进 
1 
画 Te 


图 立 司 串 练 前 网 络 的 输出 
接 下 来 对 网络 进行 训练 ， 代码 如 下 ; 






同 尝 的 吕 纹 结果 为 


一 





rrynPTrzmTarmy 虽然 网 络 的 性 能 还 没有 为 0 二 
叔 祖 小 了 ，MSE=5 MTd6e-00G6N， 误 董 曲 续 闸 图 216 所 示 。 国 此 ， 此 村 前 网络 二 出 应 该 是 
比较 精 柄 的 ， 如 图 2.17 所 示 。 
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图 天 二 广 莹 坦 到 的 坟 误 簿 曲 旺 【审计 画 得 tmainim) 


图 2-17 显示 的 桔 果 证 实 了 我 们 的 蒲 测 , 此 时 网 络 对 P 和 T 之 间 非 线性 殴 射 共 系 的 拟 侣 
是 非常 情 确 的 。 


地 1 
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图 忆 17 宙 彝 后 的 网 络 辆 出 
上 面 创建 的 BP 网 峙 的 学 习 函 数 .训练 函数 和 性 能 函数 都 采用 上 默认 值 ,分 别 为 lsamgdm、 


trianlm 和 mse。 接 下 来 ,还 是 针对 这 个 问题 ,建立 一 个 学 习 函 教 为 lfamgd, 训 练 函 元 为 taingd 
和 性 能 函数 为 msereg 的 BP 网 络 。 





此 时 间 络 的 训练 误差 曲线 如 图 2-18 所 示 ， 可 见 ， 皮 过 200 次 训 夕 后 ， 网 络 的 输出 误差 
比较 大 ， 而 且 网 络 误差 的 和 冀 速度 非常 慢 。 这 是 由 于 训 暴 函 烙 tmaingd 为 单纯 的 梯度 下 降 训 
练 冰 数 ， 训 练 速 度 比较 慢 ， 而 且 容易 陷入 局 部 最 小 的 情况 。 此 时 网 络 对 PP 和 了 之 问 关系 的 
拟 音 情况 铺 出 如 图 2.19 所 示 。 
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古 二 到 了 局 后 夏 里 是 明 站 


图 2.15 ， 网络 的 输出 “了 训 红 画 元 ，tmaingd1 


可 见 网 络 的 畏 庶 确 实 比较 差 . 这 种 情况 下 ， 特 训 绕 本 琢 收 改 为 maingdxs， 该 国 灶 也 是 孝 
麻 下 降 社 训 绒 函 吏 ， 但 是 在 训练 过 程 中 ， 它 的 学 习 速 床 是 可 变 的 。 





“此 时 ， 网 绍 的 训练 误 莽 曲线 如 图 2.20 所 示 ， 在 200 次 训练 后 ， 以 msereg 函数 评价 的 


51 


En 慎 志 十 而 ) 证 
WiS 辣 络 EiDSNMATLAB :7 


ww= 
网 络 性 能 为 0.877799， 这 已 经 不是 很 大 了 。 可 见 ， 采 用 学 习 速 率 可 变 的 训练 函数 对 网 络 进 
行 训练 ， 训 练 后 网 络 的 性 能 应 该 是 下 销 的 ， 


| Perioemeance 站 未 HTTWO 全 oil is 有 
伯 


让 惑 遇 本 曾 订 1 斋 1 本 1 肥 200 
0 EBeha 


语 3 区 阅 申 的 训 锋 误 关 曲 旺 


此 时 ， 网络 对 P 和 T 之 间 非 线性 美 系 的 拟 侣 情况 输出 如 图 2-21 所 示 , 了 验证 了 我 们 的 狂 
测 ， 网 络 的 性 能 确实 下 铺 。 


targal 
PetDa 月 


图 z 了 1 网 妾 的 输出 【 齐 纯 示 数 traine 丰 ) 


剧 用 mw 划 建 的 前 向 型 网 络 ， 每 层 的 权 值 函数 都 为 dotprod， 栓 入 函 孝 
了 ”为 netsum， 靶 的 补 始 化 夯 才 为 initmw， 


5 


as 
2.5 线性 网 络 的 神经 网 络 工具 箱 函 数 


MATLAB 了 的 昼 坚 网 络 工具 情 为 线性 网 络 提供 了 类 量 的 函数 ， 它 们 可 委 别 用 于 线性 网 
绕 的 电 计 、 爷 建 ， 分 析 ， 训 练 及 仿真 等 。 下 面 对 这 些 函 数 的 动 虐 。 调 用 赂 趟 和 应 竹 意 的 问 
是 等 进行 详细 办 外 。 

此 性 网 阁 的 常用 函数 奏 见 28 所 示 s 


表 3H， 斌 性 网 奢 常 用 函数 


| 国 了 mm 陡 | 小 到 1 sr | 
体 有 | 夯 五 需 轴 出 必 一 < 一 二 ~- | 
本 
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2.5.1 线性 网 络 创建 和 设计 卫 数 





‖ 证] 

该 函 数 可 以 创建 一 个 名 性 县， 所 谓 线 性 层 是 一 个 单独 的 屋 吹 ， 它 的 加 郴 数 为 datprod， 
和 输 玉 画 数 为 netsum， 传 递 函 为 purelin。 线 性 层 一 般 用 做 信号 处 理 和 预测 中 的 自 通 应 证 波 
器 。 函数 调 用 格式 为 : 






el 起 呈 ini 表示 在 一 个 对话 杠 中 创建 一 个 新 的 网 络 ; 

PR:， 由 民 趟 恰 六 元 素 的 最 大 值 和 最 小 值 组 成 的 民 区 2 失 窍 阵 ; 
58， 输出 向 量 的 数目 ， 

ID;， 输入 延 退 向 量 ， 黑 认为 [0 

LR， 学 习 束 率 ， 周 钛 为 虽 Oi 

iais 函 栈 和 返回 值 ， 一 个 晰 的 线性 层 。 


妇 林 用 0 代 堆 参加 1D， 用 栓 关 向 量 的 二 阵 BE 代替 和 参数 【R， 屠 各 函数 
me 严 民 号 证) 运 夯 的 上头 性 靶 的 息 十 学 习 迄 率 时 于 马 朱 说 是 重 上 大 的 ， 


了 1 meWiini 
沪 函 数 可 以 设计 一 个 线性 县, 它 通过 输 六 向 量 和 目标 向 量 素 计 算 线性 层 的 权 值 和 赣 值 ， 


沿用 格 式 为 站 
ME 机 “AS 


net = mewliad:， 玫 示 在 一 个 对 话 框 中 创建 一 个 新 的 网 络 : 








城中 ， 


下 证 EERR 全 什 名 前 秆 加 ti 1 


5 辣 引 ii ESINMATLAB:73wi 
F:， 总 组 办 六 向 量 组 成 的 代 区 总 维 矩 阵 ; 
Ti 六 组 目标 芬 迷 向 量 组 威 的 8X 总 挫 惩 阵 ， 
四 :初始 输 六 下 退 状态 的 和 个 藤 元 甘 列 ， 旺 个 元 束 丙 {ikgl 帮 是 一 个 及 i2 矶 骏 的 
窍 阵 ， 默 认为 室 。 
met 函 琢 种 回 值 ， 一 让 研 性 屋 ， 它 的 输出 误差 平方 和 对 于 办 六 正 来 说 具有 量 小 
值 。 
例 211 在 输 闪 已 输电 目标 工 和 初始 输 六 鞍 退 给 定 的 情 贺 下， 利用 函数 二 wiind 创建 
一 个 线性 尾 ， 划 对 其 进行 迟 真 。 
MATLAB 代码 如 F: _ 











运行 结果 如 下 


2.5.2 学 习 函 数 


本 [al 

该 函数 为 Widrow-Ho 寻 学 习 函 数 ， 也 称 为 delta 准则 或 最 小 方差 准则 学 习 函 雪 ， 它 可 以 
收 改 神经 元 的 权 值 和 闽 值 ， 使 输出 误差 的 平方 和 最 小 。 它 沿 着 误差 平方 和 的 下 降 最 快 方向 
连 赋 调整 网 阁 的 权 值 和 间 值 ， 由 于 线性 网 络 的 误差 性 能 表面 是 抛物 面 ， 仅 有 一 个 最 小 值 ， 
因此 可 以 保证 网 阁 是 收 匣 的 ， 前 担 是 学 习 率 址 超出 由 函数 maxlintr 计算 得 到 的 最 大 值 。 调 
用 档 式 为 : 





其 中 ， 
硒 ， 号 芭 要 纵 的 训 权 算 阵 【或 为 X1 的 阔 值 矩阵 ): 
PE， 个 民 挫 的 输 六 向 量 【 或 为 总 个 昔 值 输 坟 入 
zi 站 组 S 纵 的 训 权 和 输 六 向 量 : 
四: 咏 蛆 怠 摊 的 网 暑 畏 庆 疝 量 ; 
A: 组 弛 维 的 输出 疝 量 ; 
Ti 总 组 S 印 的 目标 向 生 ; 
E; 总 组 号 的 的 误差 向 量 ， 
EWwW': 号 基 民 诊 的 性 能 允 数 的 梯度 
EA: 念 组 S 维 的 性 能 参数 的 输出 梯度 ; 
LP;， 学 习 参 数 ， 若 没有 则 为 空 ， 


1 
LS， 学 习 状 态 ， 韧 始 值 霉 空 ; 
dW: 3SXxR 扒 权 和 值 【 或 阅 值 ) 的 变化 矩阵 ， 
LS 新 的 学 习 状 坊 : 
learmpicedej， 针对 不 同 的 eode 返回 相应 的 有 用 信息 ， 人 得 括 ， 
paaimes' ~- 返回 学 习 佑 数 的 名 称 ; 
Pdefaults' - 返回 默认 的 学 习 参 蚊 : 
meedg'- 旭 果 函数 使 用 了 EW 或 BA， 则 返回 1。 
函 教 的 学 习 厌 数 LP 可 以 自行 设 定 ， 如 设 上 征 学 习 迷 率 LPlr=0.01， 这 帐 是 
其 默认 慎 ， 
下 了 1 玫 鞠 二 站 
计 丽 监 圾 分 析 函 数 ， 用 于 计生 禾 性 大 的 量 去 学 习 速 率 。 调用 格 起 为: 









其 中 ， 
P， 输 六 向 量 的 只 X 总 捧 征 阵 ; 


[re maxlinlr(Pbias)， 针 对 带 有 阔 值 的 线性 垦 得 刘 一 个 所 需要 的 最 大 学 习 速 府 。 
下 面 一 组 代码 可 在 娩 定 输入 下 的 情况 下 芬 “ 部 阅 值 ”和 “不 带 阔 值 ”两 种 情况 求 担 
请 后 性 屋 所 项 的 最 大学 习 速 率 。 





< 本 ~ 
一 般 来 说 ， 学 习 过 率直 天 ， 所 功 的 训 昧 时 间 就 趣 少 。 但是， 如 时 学 习 违 香 
过 大 ， 则 窗 易 造成 学 习 过 程 的 不 重 记 ， 


例 2.12 线性 网 络 经 常用 做 信号 处 理 和 预测 中 的 自 适应 沁 波 器 。 本 例 试图 创建 一 个 单 
、 音 神经 元 的 线性 网 络 ， 输 入 延迟 为 0 和 1， 学 习 如 率 为 Q0i。 









大 












接 下 来 针对 输入 向 量 P1 对 同 络 进行 仿真 。 


输出 结果 为 : 


可 见 ， 此 时 的 所 有 输出 都 为 0。 
定义 一 个 目标 向 量 T1， 调 用 自 适应 函数 au 对 网 纤 进 行 自 适 应 外 型。 





捐 。 由于 这 是 第 一 次 届 用 画 吉 adapt， 因 此 需要 用 到 至 认 的 输入 延 退 条 件 - 
输出 结果 为 ， 












和 = 责 
和 呈 和 


六- 本 


经 过 自 适应 处 理 后 的 网 络 ， 输 出 有 了 明星 的 变化 。 
给 出 一 组 新 的 输入 和 目标 序列 , 利用 上 一 次 自 适应 的 最终 条 件 Pf 作为 本 次 自 适 应 过 程 
的 志 妈 条 件 ， 对 网 络 再 次 进行 自 适应 。 


tf 
有 和 了 


e 
吕 
证 
-站 1 了 

| 







量 后 ， 利 用 所 有 的 输入 院 列 和 目标 序列 对 网 络 进行 调 练 ， 训 练 次 数 设 定 为 200 次 ， 目 
奈 误差 为 01。 在 调 练 之 前 ， 对 网络 的 权 值 和 靖 值 进行 初始 化 - 
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图 2 网 阁 训 峰 计 程 的 机 莹 曲 妓 


古 TRID 侧 囊 的 吉 性 网 始 : 权 值 落 数 为 dotprod， 格 六 函数 为 etsum， 和 神 
趣 元 传递 函数 沪 puielia， 权 值 和 间 值 的 暂 始 化 西 寺 为 initzero， 学 习 函 数 为 
learnwh， 性 能 邓 豆 湾 mae。 - 嘲 


2.6” 自 组 织 竞争 网 络 的 神经 网 络 工具 箱 函数 


站 组 姐 竞 争 人 工 神经 网 绍 以 无 教师 教学 的 方式 进行 网 络 训 蝶 ， 有 具有 自 组 织 功能 ， 网 络 
通过 自身 训练 ， 自 动 对 输入 模式 进行 分 类 。 自 组 织 竞争 人 工 神 经 网 络 的 基本 岂 杉 是 网 络 柚 
争 屋 中 的 各 神经 元 通过 竞争 来 获取 对 输入 模式 的 响应 机 会 ， 最 后 仅 剩 一 个 神经 元 成 为 兖 种 
的 胜利 者 ， 并 对 那些 与 获胜 神 既 元 有 关 的 各 连接 全 地 着 更 有 利于 它 竟 争 的 方向 调整 , 因此 ， 
自 蛆 组 竞 钙 人工 神经 网 阁 进一步 拓宽 了 神经 网 络 在 分 灶 和 模式 识别 方面 的 度 用 。 

MATLAB 7 的 神经 网 络 工具 箱 为 自 组 织 竞争 网 络 提供 了 大 量 的 函 轨 工 具 。 本 节 将 详细 
介绍 这 些 函 数 的 项 能 调用 格式 和 注意 事项 等 。 表 2.9 列 出 了 自 组 织 竞 争 网 络 常用 的 函数 。 





本 医 而 机 
古风 别 吕 阿 络 本 PSMATLAB :7xw: 
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2.6.1 神经 网 络 创建 郴 数 





下 .而 E 研 记 


该 函数 用 于 创建 一 个 竞争 层 。 调 用 格式 为， 


其 审 ， 
iet = mewei 表示 在 对 语 框 申 创建 一 个 新 的 网 妆 
PR 民 个 辆 入 元 素 的 最 大 值 和 最 消 值 的 设 定 值 ， 民 芝 2 纵 矩阵 ， 
Si 神 既 元 的 数目 + 
RILR， Kohonen 举 习 束 率 ， 上 认 为 由 01， 
人 LRConacience 学 习 速 率 ， 默 认为 由 001， 
meal 函数 皇 回 值 ， 一 个 新 的 竟 争 屋 ， 
之 汪 古本 有 Wi 
该 函 归 用 于 刨 建 一 个 自 蛆 乌 特 征 昨 射 。 调 用 格式 为 ， 


其 中 ， 
Et= 0RWSE 地 未 在 对 话 框 中 创建 一 个 新 的 同 阁 ; 
FRR 个 输入 元 囊 的 最 太 值 和 最 小 值 的 设 定 值 ， 民 莽 给 窍 阵 ， 
出 ;第 层 的 维 数 ， 默 认为 [ 邱 .9]: 
tm 扰 赴 画 敢 ， 卡 认 鸭 "hextap"， 
ifcni 下 离 函数 ， 是 认 为 "Hinkdist”; 


全 


Im or 速 认 ， 默认 为 站 9; 
0stepsi 和 灶 阶段 的 此 长 ， 默 认为 1000， 
ur 调谐 防 生 的 学 习 束 率 ， 默 认为 002， 
ms， 调谐 阶段 的 铬 域 距离 ， 蒜 认为 1。 
函数 返回 一 个 自 组 癌 特 征 映 射 ， 
卫 J 而 芭 铬 | 上 可 
计 函 数 用 于 创建 一 个 学 习 向 量 量化 LVR 网 昭 。 调 用 格式 尖 ， 





其 中 ， 
met = mewlvdq: 用 于 在 对 话 框 中 创建 一 个 LwQ 网 络 ; 
ER 玉江 守 的 矩阵 ， 指 定 了 师 关 向 量 中 元 素 的 最 夫 值 和 最 小 慎 ; 
51， 竞争 层 神经 元 的 监 目 : 
PC， 分 类 的 百分比 
LR;: 学 习 速 率 ， 默 认为 001 
LEF， 学 习 函 数 ， 蒜 认为 leamlv1。 


学 习 函 献 LE 可 中 选用 learnlvl 基 记 ieamilwvz， 杠 是 ， 应 用 einlw2 是 有 限制 
复 的 ， 只 有 在 剂 用 learnmlv1l 对 同 阁 进行 训 上 后 ， 才 可 以 调用 laaimmlv2 东周 课 训 练 - 


工作 2 传递 函数 


1 ee 
该 函数 为 竞争 性 传递 函数 ， 用 于 神经 元 的 网 络 输入 转换 ， 调 用 格式 为 : 





其 中 ， 
Ni 输入 【到 》 向 量 的 8 关 总 准 矩 阵 ， 有 
Ai 函数 返回 值 ， 输 出 向 量 矩 阵 ， 每 一 列 向 量 只 有 一 个 1， 位 于 输入 向 量 最 大 的 
位 置 ; 
info ecompetlcode)。， 根据 code 值 的 下 同 返 回 有 甘 函 数 的 不 同 信息 ， 包 括 ; 
是 二 一 一 运 回 导 函 玫 的 名 称 ; 


下 面 络 出 一 组 MATLAB 代码 ， 可 以 演示 该 函 数 的 项 能 和 运行 机 悍 ， 










果 为 ， 


两 时下 有 国 





有 本 


向 量 a 和 n 如 疼 3.23 所 示 。 














重 目 


图 3-33 函 监 sompal 的 向 量 a 和 5 





二 


了 ] sofirmiax 
_ 该 冰 数 为 软 最 大 传 遵 函 数 。 调 用 格式 为 


各 参数 洁 义 请 参见 compet。 与 compet 不 同 的 是 ， 参 数 A 为 函数 返回 向 量 ， 各 元 素 在 
区 间 位 ,I 之 间 ， 且 向 量 结 格 与 双 一 要 。 
利用 如 下 一 组 代码 演示 该 函数 的 功能 和 运行 机 理 ， 











向 量 a 和 如 图 2.24 所 示 。 


263 上 距 商 轩 数 


下 乱弹 


该 本 数 为 Bof 距离 函数 ， 在 冶 定 神经 网 络 某 层 的 神 坚 元 的 位 置 捕 ， 可 利用 访 函 籽 计 算 
可 经 元 之 间 的 距离 。 该 函数 通常 用 于 结构 画 数 的 Eridiap 的 神经 网 纤 层 。 调 用 格 趟 为 ; 


二 二 bagisiipagh 
其 中 ， 





图 荆 24 函 数 afiaax 的 向 重 5 和 证 


到 神 到 元 恒 置 的 辐 基 号 座 十 阵 ， 


由 函数 返回 值 ， 神 经 元 距离 的 SXS 邹 矩 阵 。 
函数 的 运算 原理 为 过 人 门 = max| 且 = 局 | ,其 中 ,di 人 让 表示 距 高 矩阵 中 的 元 素 ; 旦 表 


示 位 置 上 矩阵 的 第 i 列 商量 。 


名 下 MATLAB 代码 可 以 希 示 该 困 数 的 还 算 规 则 | 


右面 国 皮 . 届 ， 列 产生 一 个 3%4 的 引 竹 


二 三 oRa 二 吕 Fog1 
让 了 结果 为: 

区 N = 
本 本 5 站 ,0 号 S65 恒 . 吉 了 
在 到 呈 1 | 攻 让 看 15 LE 
TENR 下 由 3 而 也 下 了 1 

由 王 

必 ED 让 8937 全 到 上 下 
由 册 心得 7 也 人 3755 
全 .4937 全: 己 72 号 看 站 59 
ss | 让 759 机 55 四 
pos 是 隧 机 产生 的 缘 直 


名 每 次 运行 上 面 风 代码 ， 姓 阵 pos 和 上 出 的 值 可 能 孝 会 不 一 样 . 这 是 由 于 扯 阵 


人 7 





天 
该 函数 为 欧 氏 上 离 权 





其 中 ， 
凤 : 虽 基 风 纵 的 权 慎 所 阵 ， 
Pi 总 诅 输 大 【 列 ) 向 量 的 民 基 总 维和 拭 阵 ; 
Zi S 关 由 地 的 下 离 短 阵 ， 
Pos: 神经 元 位 置 的 及 XS 扒 重 阵 ; 
D:， 8S 芝 8 锥 的 臣 离 矩阵 
是 = 十 sirdstwy 返回 值 为 室 ， 因 为 该 函 灼 不 存在 导 函 束 。 


函数 的 运算 规则 为 呈 = sqrt[sum[(x- 》 耻 镍 ,其 中 和 ?y 分别 为 列 向 量 。 下 面 用 一 组 代 
码 演示 该 函数 的 运行 机 理 ， 








3 linkdiat 
该 函数 当 连 捷 臣 离 冰 数 ， 在 纤 定 神经 元 的 位 置 后 ， 该 函数 可 用 于 计算 术 变 元 之 问 的 起 
离 。 调 用 桂 式 为 ; 





其 中 ， 
pag: 六 区 有 奴 的 神 公 元 位 置 矩阵 
了 号 区 纵 的 本 离 给 阵 。 
函数 的 运算 原理 为 : 


IE 
[D 如 果 f= 
下 
1 如 果 sum[ 人 四-P) =1 
了 全 站 12 各 果 存 在 上 使 得 dt = 了 (全 = 1 
3 如 果 存 在 后, 司 ， 使 得 dd 信 占 ) = 可 (后 ) = 了 (ks,=1 


太 如 果 存 在 后 , 妇 ，kw， 使 得 中 (与 ) 二 可 (用 ,三 ) = 一旦 (kw 用 =1 
引 其 他 


面 用 站 生 全 交 全 生生 全 生生 生生 





运行 结果 为， 





组 mandist 
读 函 数 为 Manhattan 距离 权 函 表 。 调用 格式 为 : 





各 参数 含义 请 归 见 dist。 
函数 的 运算 原理 为 吕 = sumfabs[X -Y))， 其 中 X 和 为 两 个 向 量 。 利 用 下 面 一 组 代 
三 进 行 膏 示 ， 








26.4 学 习 函 数 


1) Tearmk 
庐 函 数 为 Kohonen 权 值 学 习 函 数 。 调 用 格式 为 : 





其 中 ，， 


二 恒 三 地 而 
JR 和 瑟 辣 GESNMATLAB 5i 

如 :8 区 民 具 的 权 慎 矩阵 【或 弛 纵 的 阔 值 向 量 ); 

F， 民 基 怠 难 的 输 关 向 量 和 矩阵 《也 可 用 negflGOI 产 生 了 

莹 ， 号 区 癌 值 输 关 向量 筷 阵 ; 

两 ， 导 区 总 网 结 输 六 问 量 重 阵 ， 

上 号 区 总 输出 向 量 矩 阵 ， 

T: 8X 鲜 层 目 标 向 量 矩阵 ; 

ES 区 如 层 误 差 向 量 答 阵 ; 

EW:， 3 区 民 性 能 梯度 写 阵 ; 

EAi 号 区 总 输出 性 能 梯 座 算 阵 ， 

昌 ，SxXS 神 凤 元 蝶 离 旺 阵 ; 

LE， 学 习 人 参数， 填 无 则 为 室 ， 

LS 学 悦 状态， 初始 化 为 室 ; 

了 Wi， 号 区 民 纵 的 权 值 了 间 值 ; 变化 矩阵 

13S， 新 的 学 习 和 状态 : 

条 扣 = Junkicode) 根 所 二 同 的 eade 值 返 加 和 下 同 的 相关 信息 ， 和 包括， 
Paames 一 一 返回 学 习 夫 数 苦 ， 
Pde 全 Us 一 一 返回 点 认 的 学 习 替 数 ， 
ieeda 一 一 旭 果 函数 全 用 了 验 烙 ERW 戈 同 ， 则 返 同 1 

在 利用 读 表 履 进行 学 习 之 前 ， 希 要 语 定 学 习 万 各 。 必 如 ， 学 习 速 率 的 刷 置 格式 汶 工 民 
三 和 和 1， 实际 上 这 也 是 学 习 速 率 的 菊 认 值 。 


函 灿 利 用 长 ohanen 规则 进行 学 习 。 
IE 
该 函 数 为 自 组 织 忠 射 权 值 学 可 函数 。 调用 式 为 ; 










妥 AT 人 Re 二 后 - 
人 SNTLEES 寺 人 
各 参数 含义 请 参见 eamk， 


肌 ， | 





在 利用 剧 函 驯 进 行 学 习 之 前 ， 需 要 设置 以 下 学 习 套 数 ， 闸 表 210 所 示 。 
囊 卫 境 学 习 志 茹 





以 上 各 值 部 是 MATLAB 的 默认 值 .如 需 调 由 , 只 要 按照 上 面 的 格式 重 困 进行 设 定 即 可 。 
1 
该 函 表 为 模 值 学 习 数 。 调 用 楼 式 为 





罗 和 ni 
各 稳 数 的 洛 义 请 获 见 learnk。 
使 用 该 函数 前 ， 需 要 设置 学 习 速 幸 ， 如 果 LPlr= 001， 这 就 是 MATLAB 的 默认 值 。 如 
外调 性 ， 只 要 做 相应 改动 即 可 。 
让】 earmBS 
该 函数 为 Dutstar 权 值 学 习 函 数 。 调 用 格式 为 ; _ 





各 参数 的 含义 和 学 习 参 数 的 设 定 ， 请 参见 leamis。 
26.5 初始 化 本 数 


1) midpoint 
该 函 灿 为 中 点 权 值 补 始 化 函数 ， 调 用 覆 式 与 


其 中 


S$:， 神经 元 的 数目 ， 

PR， 每 组 输 六 各 量 的 量 大 信和 最 小 导 组 成 的 民 x2 雏 矩 阵 ， 失 定 了 和 输 太 区 间 为 
[Paain Prnax]i 

视 : 画 数 反 回 慎 ，3XR 手 的 符 阵 ， 上 个 元 束 对 应 设 定 为 (Pmin+Pmaxya- 

运行 下 面 的 代码 ， 可 知 该 函数 的 运行 不 理 ， 





运行 结果 为 ; 







这 各 代码 中 的 矩阵 [0 1: -2 2] 设 定 了 输入 的 范围 ，5 表示 神经 元 的 数目 是 5 个 。 
2.66 权 值 国 数 


1 me 名 由 让 
该 函数 为 负 距离 权 值 函数 。 调 用 格式 为 ; 






其 中 ， 

友 ， 引 区 史 谁 的 权 值 定 陈 ; 

P: 总 组 输入 向 量 的 开奖 总 维和 拭 阵 ， 

雪 =eadiginderiwy， 返回 慎 为 室 ， 因 为 访 画 数 丰 存在 导 函 数 ， 
该 函 监 的 运 特 原理 为 ; 


了 


 : 夯 曾 | 
Wi 人 EEDSNMATLAB 75 
= =-sqn(sumlw- Pi 


灾 际 上 这 出 是 负 欧 氏 眶 离 。 
_ 逢 用 下 而 一 组 代码 演示 六 数 运 行人 再。 





267 星 示 函 数 


1 辣 tson 
该 函数 用 于 镍 制 自 组 织 特 征 贡 丑 。 调 用 格式 为 : 


其 中 ， 
Fasa 号 证 凤 维 杆 既 元 的 位 置 癌 量 ; 
吧 : 权 值 算 阵 : 

Platsomiposy 利 用 红 点 坚 制 术 芭 元 的 位 置 ， 将 欧 锋 面 离 小 于 等 于 1 的 神 坚 元 连 持 起 来 ， 
plotsomfW,DJND) 将 区 氏 上 离 小 于 等 于 1 的 神经 元 的 权 值 向 量 连接 起 来 。 


2.6.8 结构 函数 


1 ) hextop 
该 函数 为 六 角 导 结构 函数 。 调 用 格式 为 ， 
imi， 扒 荐 为 站 的 层 的 长 度 ; 





pos: 由 的 个 知 列 向 量 组 成 的 NXS 扒 矩 阵 ， 其 中 ，S=dimlX 击 m2X 区 出 mN， 
可 以 利用 该 函数 创建 一 个 三 纵 的 神 坚 网 络 层 ， 失 有 和 个 神 皮 元 ， 分布 三 一 个 8XS 的 
吉 前 品格 上 。 和 伐 三 如 下 ， 





运行 结果 如 图 2.25 所 示 。 


看 生 王 二 








站 
围 2.25 函 晓 hektop 产生 的 和 个 神 公元 的 分 布 位 轩 


了 2) gridtop 
人 


各 套数 含 文 请 套 见 Heuiop。 
同样 ， 可 以 利用 该 函数 创建 一 个 一 维 的 神经 网 络 层 ， 共 有 和 个 神经 元 ， 分 布 在 一 个 
xx 的 网 格 上 。 代 码 如 下 ， 





JR 





图 22 古国 晤 Eridiop 产生 的 各 个 神 既 元 的 苍 布 位 置 


3) randtop 
这 而 呈 孝 阳 人 和 站 全 一 上 CR 






各 参数 舍 义 请 参见 Re 3 
同样 ， 可 以 利用 德 函数 创建 一 个 二 维 的 神经 网 络 层 ， 共 有 斩 不 神经 元 ， 分 布 在 一 让 8 


下 人 | 
DSSNMATLAB 二 ri 


X5 的 随机 格 上 。 栈 码 如 下 ， 





运行 结 权 如 图 斌 27 所 示 。 





Tong1 用 


图 .27 函 顾 Tang 产生 的 向 个 审 你 元 的 和 奇 居 畦 


例 2.13 茶 本 竞争 型 网 络 特别 征 侣 于 解雇 本 式 分 类 问 古 。 本 例 给 定 一 组 输入 向 量 P, 建 
和 





二 
| 1- 四 
二 性 : 包 


可 见 ， 输 入 向 量 应 该 分 为 两 组 ， 一 组 为 比较 小 的 点 ， 另 一 组 为 比较 大 的 点 ， 如 图 2.28 
所 示 。 册 图 可 见 ， 堪 下 角 的 两 个 点 为 一 组 ， 碳 上 角 的 两 个 点 为 一 组 。 





门人 
图 衬 葡 ， 输 六 向 量 的 分 布 
接 下 来 创建 一 个 基本 竞争 型 网 络 ， 对 其 进行 分 荣 。 





1 加 
而 面 昌 由 HT1 1 1 - 
全 页 yi Er = 











训练 好 的 网 络 输 出 为， 


可 见 ， 网 络 确实 将 输入 向 量 对 为 两 类 ， 一 业 为 01021。(0.10.1) 两 个 点 ， 利 下 的 两 
栓 汇 第 二 红 。 





通过 newe 促 建 的 基本 总计 型 神经 网 络 只 有 一 个 竞 事 基 ， 版 值 函 教 为 
egidiat， 输 .了 梧 轨 为 ietsum， 心 递 函 数 为 compet， 培 站 化 画 教 为 midpaint 或 
initcon ,训练 函 教 或 自得 应 函 台 为 trains 和 和 trainr, 学 习 呆 上 为 iearnk 或 lecamcon。 


例 2. 14 针对 上 例 中 的 输入 向 量 P， 建 立 一 个 自 组 织 特 征 映射 ， 并 对 了 进行 分 类 。 
首先 建立 一 个 SOM 网 络 ， 并 绘制 由 网 络 当前 神经 元 的 位 置 。 








创建 的 SOM 网 络 的 竞争 层 为 一 个 二 维 的 3xXs 的 平面 阵列 ， 拓 扑 函 数 为 hextop， 上 距离 
函 歼 为 linkdist， 其 他 参数 均 取 默 认 值 ， 

此 时 的 神经 元 分 布 如 图 32 所 未 ， 由 图 可 见 ， 此 时 的 神经 元 位 置 是 均匀 分 布 的 ， 也 就 
是 说 ， 网 络 还 没有 对 输入 向 量 进 行 分 类 的 能 力 。 


接 下 索 对 网 络 进行 训练 ， 检 查 训 拒 过 程 中 村 蝶 元 位 置 的 变化 ， 分 别 如 图 230， 图 31 
坝 丞 ，。 


Fn FIOnE 
于 
昌 相 画 画 二 
所 天 
: ] 二 
加 
醒 硬 硬 
055 


于 RE 


本 也 芍 神经 元 位 置 的 初始 分 布 


吕 


1 


一 | 
[了 
[| 
三 画 


站 
鲁尼 菇 


图 玉 苞 覃 烃 元 位 置 【 剧 练 起 烙 103 


击 图 23 和 0 可见， 经 过 10 次 调 蝶 后 。 神 经 元 的 位 置 就 发 生 了 明显 的 改变 。 神 经 元 位 置 
的 贡 布 状况 雪 示 它们 已 贤 可 以 对 办 六 向 量 进行 分 类 了 。 南 时 ， 再 增加 训 夭 次 整 已 经 阁 有 性 
亚 实 际 意 训 了 ， 妈 过 5 次 吕 练 后 的 同 络 神 经 元 分 布 和 10 欣 训 练 后 的 神 既 元 分 布 讼 有 性 各 
骨 显 的 差异 ， 各 图 231 所 示 。 

经 过 10 次 训练 后 ， 网 将 的 输出 为 ， 


用 3 3 
型 号 人 


图 31 神 坚 元 位置 “ 训 红 该 数 ; 35》 
由 此 可 锡 ，SOM 网 络 的 分 类 结果 比较 精 绩 ， 把 4 个 点 分 为 了 4 类 ， 即 激发 了 1、13， 
2 14 四 个 神经 元 。 但 是 ， 通 过 对 桔 果 进行 分 析 可 以 发 现 ， 在 上 例 中 处 于 同一 类 的 点 在 这 
重 汶 发 的 神经 元 位 置 也 是 邻近 的 ， 这 说 明 相 对 于 蔡 本 竟 争 型 网 络 来 说，SOM 同 络 的 分 类 结 


广 


人 人 作 约 站 地址 
果 更 加 准确 ， 
既 过 25 次 训练 后 ， 网 络 的 输出 值 与 此 关羽。 需要 往 意 的 是 ， 重 新 运行 上 述 代 码 ， 可 能 
师 果 就 会 布 一 致 ， 这 是 因 胃 于 坎 激发 的 神 妈 元 布 一 样 。 但 是 ， 相 介 的 类 流 关 的 神 妈 元 忽 是 
名 近 的 ， 差 别 很 大 的 火 激 发 的 神经 元 相关 也 比较 远 ， 


利用 基本 竞争 型 网 络 进行 分 类 ， 需要 首先 设 定 栓 入 向 量 的 烛 别 总 就 ， 再 由 
此 确定 神经 元 的 站 喜 。 但 利用 SOM 同 络 进 行 分 大 却 趟 需要 这 样 ，SOIM 奖 结 
密 自 动 将 基 别 雅 小 的 点 归 为 一 娄 ， 划 出 下 支 的 点 潮 浊 的 罚 皮 元 位 年 志 是 施 近 
的 ， 
本 例 的 MATLAB 代码 为， cm 








下 Tagwrrrr 一 WeoPT7TT 
-假定 了 的 芬 灶 结果 为 


接 下 来 建立 一 个 LVO 网 络 ， 并 对 其 进行 调 练 ， 








训练 过 程 中 的 误区 曲线 如 图 2.32 所 示 。 归 过 了 次 训练 后 ， 网 络 的 输出 误差 满足 性 能 要 





图 2.32 训 蝶 误 莽 是 
对 网络 进行 仿真 ， 





旦 果 汐 : 






可见 网 络 的 训练 和 分 类 是 成 功 的 。 输 入 一 组 新 的 点 P_test， 检 查 网 络 的 分 类 功能 。 


结果 为 


网 络 将 输 六 向 量 分 为 两 类 ， 第 一 类 为 [0203)， 币 二 类 为 0.7097。 这 与 实际 的 分 类 
情况 是 一 至 的 ， 可 见 网 络 的 分 类 性 能 比较 好 。 
村 例 的 MATLAB 代码 为 _ 





Li | 





2.7 RE 


烃 疝 基 RBF) 网 效 是 以 函 琢 通 近 理 说 为 基 融 构造 的 一 对 前 向 网 络 ， 是 由 Eowell MD 
于 1985 年 提出 的 。 由 于 它 有 具有 将 构 自 适应 确 定 . 输出 与 官 靖 权 值 无 关 的 居 委 特 人性， 在 过 纵 
曲面 所 次， 自由 曲面 重 构 和 大 型 设 条 而 障 座 断 等 领域 有 着 比较 过 的 应 用 。 

RATLAB 了 的 神经 网 络 工具 畏 壤 径 向 基 网 络 提 供 了 往 甸 工具 箱 函 数 ， 官 们 对 我 们 利用 
MATLAB 进行 径 向 基 同 络 的 设计 ， 分 析 芒 实际 应 用 有 着 不 可 赫 懂 的 作用 。 素 节 特 详细 章 锅 
这 些 函 数 。 惠 二 11 到 出 了 RBF 网 将 常用 的 函数 ， 


琳 二 1 RBF 网 阁 常用 函数 甫 
| 画 玫 者 本 | 再 盈 有 和 | 


促 秆 - 一 小 民有 下 网 阁 


虽 硬 一 个 十 本 的 RBF 网 牙 
则 建 一 个 己 言 坤 攻 同 纪 


| swgmn | 设计 一 村 广 竟 回 枉 人 经 网 志 


同 馈 何 建 冰 同 


ME 


27.1 神经 网 络 创建 本 数 


双阳 巷 情 征 函 


将 生机 家 引 峙 接 为 向 星相 


iec 前 证 二 数 





下 可 珊 T 
机 茵 用 格式 为， 
本 面 





E; 人 给 办 六 向 重组 成 的 民 关 吕 色 矩阵; 

T: 人 诅 目 标 分 类 向 量 硼 成 的 3x 吕 锥 矩 阵 ; 

AL， 掏 方 襄 上 ， 融 认 海 心 

SPREADi 径 向 基 函 袁 的 扩展 速度 ， 黔 认 淘 1 

NMN， 和 神 皮 元 的 最 天 灼 目 ， 萄 认 汶 下; 

DF， 两 次 显示 之 间 记 添加 的 神 妈 元 数目 ， 默 认为 35， 
feit: 返回 值 ， 一 个 皮 向 基 网 络 : 

杠 * 证 回 值 ， 届 虹 记录 。 

该 函 上 喜 设计 的 至 向 划 网 阁 im 可 用 于 函 喜 遇 过 。 反 商 监 画 吉 的 术 磺 违 度 
SPREAD 每 支 ， 函 加 的 报 间 就 丰 平 滑 。 恒 是 ， 过 夫 的 SPREAD 意味 着 否 本 非常 
率 的 剖 经 元 以 适应 画 辑 的 快速 变化 。 姑 果 9PREAD 证 证 过 小 ， 刚 意味 着 需要 许昌 
种 经 元 来 适应 男 履 的 弹 慢 变化 ， 这 尾 一 上 ， 设 计 的 同 背 性 能 就 十 党 很 好 。 因 此， 
在 同时 设计 过 程 中 ， 雪 要 用 不 同 的 SPREAD 企 进 行 委 试 ， 双 确定 一 小 最 忧 值 ， 


隆 


IE 


全 辣 末 本 SNMATLAB ui 


了 1 1 虹 风 Pbe 






该 函数 用 于 设计 一 个 准确 的 径 向 基 网 络 。 调 用 格式 为 ; 
二 re。 有 FF 
人 





各 套数 音义 请 参见 newrb。 
一 般 来 讲 ，newrbe 和 newtb 一 样 ， 神 经 元 数目 越 大 ， 对 函数 的 拟人 就 直 平 少 ， 但 是 ， 
过 多 的 神经 元 能 会 导 吾 计算 困难 间 厦 。 


和 newrb 不 同 ，newrbe 放 名 基于 设计 向 量 快 速 地 、 无误 兰 好 设计 一 个 村 
向 基 网 阁 ， 


ai 





如 时 SPREAD 值 接近 于 0， 出 创建 的 概率 神 坚 同 阁 可 以 作为 一 个 最 近 吾 
总 匣 类 器 , 瑚 着 SPREAD 值 的 增 皮 ， 需 要 更 蓝 地 考 庶 庆 网 里 附 近 的 设计 向 量 ， 
站】 帮 ET 
熏 函 数 可 用 手 狂 计 一 个 广 变 回 时 神 即 网 阁 。 广 沉 回 归 尺 网络 是 歧 疝 基 网 络 的 一 种 ， 
适 常用 于 函数 台 近 。 调 用 格式 为 ， 
7 | 一 ms 1 和 汪 晤 
ntRTSPREAD 
各 大 数 的 舍 久 请 夯 见 TeEwrhe。 
间 mewrb 一 样 ，SPREAD 的 慎 息 夫 ， 由 此 设计 的 网 结对 画 的 的 折合 刷 趣 
平 洗 ， 勇 了 更 精 博 地 时 孝 据 进行 椒 秋 ， 最 奸 使 SPREAD 的 值 小 于 性 六 耐量 之 






间 的 此 型 距离， 
2.7.2 转换 函数 
] 而 可 2WEE 
该 函数 用 于 将 数据 索引 转换 为 向 重组。 调用 格式 为 : 


其 中 ， 

indz 数据 索引 列 向 量 : 

weci 本 数 返回 值 ， 一 个 稀 闵 矩阵 ， 生 行 只 有 一 个 1， 短 阵 的 行 数 等 于 数据 索引 的 
让 蚊 ， 列 蚊 等 于 数据 壳 引 中 的 量 赤 值 。 

可 通过 下 面 的 一 组 代码 这 示 ind2wves 的 计算 原理 ， 





有 本 t 由 
和 全 | aa 


上 壕 代 码 的 第 一 行 定义 了 一 个 数据 索引 列 向 量 ， 第 二 行将 其 转换 为 向 量 组 。 运 行 结果 
各 








天 下 重 全 
可 以 看 出 ， 蛙 果 应 访 是 一 个 4X3 的 矩阵 ， 其 中 【ay) 是 与 数据 索引 列 向 量 相对 应 的 。 
为 数据 索引 值 ，y 查 示 工 在 数据 索引 中 的 人 置 ， 由 此 组 成 了 输出 矩阵 。 矩 阵 让 没有 填 满 的 
部 分 需要 用 口 补 齐 。 

旦 WECZi 


该 函数 用 于 将 向 量 组 转换 为 数据 索引 ， 与 indzvec 是 互 送 的 。 
2.7.3 传递 郴 数 


1) radhbas 
该 函数 为 径 向 基 传 递 函 数 。 调 用 格式 为 ! 





其 申 ， 
IN 输 关 【 列 工 向 量 的 号 交 总 纵 筷 阵 : 
Ai 画 监 返 回 和 矩阵 ， 与 机 一 一 对 应 ， 即 其 中 的 每 个 元 素 通 过 径 向 基本 数 得 到 A， 
误 foTadbasfeodejr 根据 eede 慎 的 下 同 返回 有 靶 画 数 的 不 同 信 息 ， 包 项 : 
deriv 一 返 问 导 画 数 的 者 称 ， 
eutput 一 一 返回 明太 范围 ， 
active 一 一 返回 可 用 办 六 范围 ， 
下 面 的 代码 可 以 综 制 剖 dbas 的 函数 图 ， 如 图 2.33 所 示 。 





图 荆 33 烃 商 基 忧 通 函 类 mdhais 













人 复 = 该 函 救 的 原型 为 口 = expl(-P)。 


例 生 二 RBF 网 阁 特 别 适用 于 解 咕 函数 各 还 问 古 ， 太 例 利 用 函数 newm 创建 一 个 RBF 
网 阁 ， 井 对 一 个 非 线性 函数 y=sqrttaj 进 行 吉 近 。 

newtb 创建 RBF 网 络 是 一 个 焉 断 党 试 的 过 程 ， 在 创建 过 娼 中 ， 不 断 增加 中 间 层 神经 元 
的 个 数 ， 直 到 网 络 的 输出 误差 满足 预先 役 定 的 值 为 止 ， 
















通过 上 述 代 码 ， 我 们 创建 了 二 个 目标 误差 为 0、 入 向 基 示 数 分 密度 为 05。 中 间 层 神 
如 元 个 数 最 天 什 为 20。 显 示 间 隔 为 5 的 RBF 网 络 。 
代码 运行 结果 为 : 


二 此 可 见 ， 当 中 间 屋 神经 元 个 数 增 至 20 时 ， 同 络 输 出 的 误差 SSE 已 经 非常 小 了 ， 误 
莽 曲 线 如 图 2-34 所 示 。 


， SF 证 了 T 二 HOTEL 二 ol 地 日 


E 直人 上 和 柄 四 


轩 

1 

外 
ea 站 村 


图 二 34， 民 丰 FF 网 阁 建 立 过 程 的 课 莽 曾 峡 
利用 以 下 疏 码 得 到 网 络 的 输出 及 网 络 的 逼近 误差 厚 战 ， 如 图 二 35 所 未 。 








图 2-33 ， 阅 络 的 明和 近 蝇 壮 曲 成 


拷 下 来 检验 网 络 的 推 性 能 。 利 用 一 组 样本 以 外 的 数据 ， 求 网 络 的 仿真 输出 ， 并 绘制 
网 络 的 误差 曲线 。 






2 1 


可 昂 ， 阅 络 的 外 推 样 二 为 5-9 之 间 的 采样 点 ,采样 周 期 为 1， 网 络 的 外 推 误差 曲线 如 
图 236 所 未 。 


图 卫 驴 网络 的 外 扑 误 站 商 十 
网 络 的 外 推 训 莽 比较 高 ， 这 是 因为 调 练 样本 相对 比较 的 中 ， 而 外 推 样本 和 训练 样本 之 
间 的 蝶 离 比较 大 。 仔 细 观 察 误 益 曲线 ， 会 发 现 S-75 之 间 的 样本 点 的 外 推 误差 相对 比较 小 。 


Di 生 瑟 问 和 本 让 SNMATLAB:7Xxm 
2.8 反馈 网 络 的 神经 网 络 工具 箱 函数 


色情 神经 网 络 【Recumenit Networkl 又 称 为 联想 记忆 网 络 。 其 目的 是 为 了 设计 一 个 网 
崔 ， 储 存 一 组 平 街 点， 人 性 得 在 冶 定 一 蛆 榈 始 值 时 ， 网 络 通过 自行 运行 能 铝 最 内 收 逆 到 设计 
的 平衡 点 上 。 反 局 网 络 有 很 多 种 ， 其 中 比较 具 型 的 一 种 是 由 美国 物理 学 过 Hopfieid 提出 的 
Hapfield 网 疼 。Hepfield 网 络 的 应 用 主要 集中 于 这 些 领域 ; 图 像 和 语音 处 理 . 数据 查询 、 窜 
错 控 创 ， 模 趟 分 美和 识别 等 。 

Elman 辣 几 也 是 一 种 反馈 网 终 。 它 在 BP 网 赂 革 本 结构 的 基础 上 , 通过 存储 内 部 状态 鸽 
茂县 备 睦 射 动 术 特 征 的 功能 ， 从 而 使 系统 具有 适应 时 变 特 性 的 能 力 。 

MATLAB 了 的 昼 皮 加 北 工 具 箱 为 Hofield 网 阁 和 Elman 网 络 提供 了 一 些 工具 函 归 ， 我 
们 可 以 借助 这 些 函 数 ， 在 实际 工作 中 使 用 Hopfield 网 绍 和 上 man 网 络 。 

反馈 网 络 常用 的 工具 怕 函 到 见 表 卫 12。 


ea ES 






上 设计 一 个 op 
硕 睹 鹿 吓 而 鉴 
| amm | 二 
| | ms | era 网络 的 情 昌 函数 






28.1 Hopfield 网 络 的 工具 箱 困 数 


【io 
流 函 数 用 于 设计 一 个 HopFieid 网 络 。 调 用 格式 为 ， 
ne Who 
= aewhoptT) 
其 中 ， 
tel= newhops* 用 于 在 圭 话 椎 中 创 古 一 个 Hopfield 网 络 ， 
T; 口 汗 目标 向 量 组 成 的 RXO 维 矩 阵 ， 具 阵 元 囊 必 须 为 1 或 -1 
net; 函数 返回 值 ， 创 建 的 Hopfield 网 络 ， 稳 定点 位 于 目标 向 量 T 中， 
F 面 一 组 代 西 可 剖 建 一 个 ee 网 络 井 进行 仿 真 。 
于 二 下 且 业 阵 转 
ee at 
这 1 可 


Aranoalaan mg 


运 季 钻 果 为 时 [1J=[-1L-44]。 由 于 芋 [LT ， 可 以 看 由 ， 投 计 的 Hopfield 网 阁 已 凤 
成 功 地 特 存 在 仿 莽 的 向 量 Ai 转换 为 最 接近 的 目标 向 量 了 。 


旭 上 8 天 册 i 

-该 秀 敖 为 赐 和 线性 传递 务 数 ， 适 常用 作 Hopfield 赂 的 忧 通 务 数 。 调 用 格式 为 ， 

FOOD 二 -ed | 
有 





和 输 六 《到 7 问 量 的 8X 避 詹 矩 阵 ， 
点 孙 数 逼 回 值 ， 限 制 在 区 间 [-1 伸 中 ， 
infa = sattinsfeodei 根据 乎 同 的 gods 值 返 回 币 同 的 有 薄 函 数 的 信息 ， 和 包括， 


ten 一 一 过 回 导 画 数 的 名 称 ， 
iame 一 一 到 回 函 数 全 称 : 
autpur 一 一 返回 箱 出 范 力 : 
ne 一 一 返回 可 用 输 八 范围。 
函数 的 原型 画 数 为 : 
一 1 玫 二 一 
Satlins[(mj= 1。 -1 过 赋 1 
1 下 友 | 


利用 站 下 的 代码 可 以 综 制 satfins 函数 ， 如 图 -37 所 示 。 





二 站 要 加 下 而 
图 37 aailims 函 旺 


282 Elman 网 络 的 工具 箱 函 数 


1 到 大 才 Li 
访 函 数 用 于 世 计 一 个 Blaaan 网 绍 。 调 用 格式 汐 ; 





et = iewelms 周 于 在 对 话 框 中 创建 一 个 Blmman 网 络 ; 

PR:，R 组 输 关 元素 的 最小 值 和 最 大 值 的 设 定 值 ，RX2 给 的 矩阵 ; 
Sir 第 f 屋 的 发 认 ， 

TEiy， 第 1 屋 的 忧 递 函 数 ， 上 默认 为 “tansig 


最 
ae 


BTFE，BP 网 绍 的 训练 函数 ， 上 默 居 为 人 ; 
了 LE 是 忆 网络 前 要 值 / 阔 革 学习 函 茹 ， 昧 认 汐 “Ieammgdm 
PEFE， 人 性 能 函 烙 ， 对 认 为 “nEe”， 

密 烙 BTE 可 以 取 tnainesd，traingdm。，traingda 潭 | traingdx 等 训练 函数 :， BLF 可 以 肥 学 习 
函 烙 earmgd 和 1leamgdm PF 可 以 肥 性 能 函数 mse 和 msereg。 这 些 函 数 在 前 面 章节 中 都 已 
有 所 齐 角 ， 在 此 不 再 禹 述 ， 

例 焉 人行 创建 并 名 绒 一 个 Elman 网 络 ， 阅 评估 其 性 能 。 
MATLAB 代码 如下， 











其 中 ， 结 果 中 的 前 $ 行 分 别 表示 训练 在 进行 联 步 后 ， 以 均 方 讽 莽 函数 mse 评估 的 性 
修 与 梯 庆 。 最 后 一 行 表示 训练 已 经 进行 了 100 步 ， 丰 到 了 最 太 步 数 ， 训 练 停 止 ， 但 性 能 目 
标 没 有 达到 。 在 这 种 情况 下 ， 如 累 认 为 网 络 的 调 练 误差 还 不 满足 要 求 ， 可 以 多 续 训 练 。 网 
络 训 练 过 程 中 的 误差 曲线 如 图 2.38 所 未 。 


评 En 地 人 LE Da 生 站 


| 


条 庙 ”有 而 人 
1 的 Da 


图 3 Elman 网 络 的 训 嵌 得 芍 曲 钱 


TCR 





利用 画 数 hewelm 创建 的 Elman 网 络 : 权 值 函数 采用 niprod， 睛 六 函 虐 
篇 r 林 用 netsaum， 权 值 和 彰 值 韶关 化 函数 玉 用 imitmw 训 幼 函数 及 用 trains， 而 伟 
遂 画 导 用 学 习 画 数 需 要 特别 指定 。 


例 2.18 因 Hopfield 网 阁 特别 适合 于 模式 回 奶 ， 则 二 例 通过 给 定 一 个 入 定 点 T 来 创建 
一 全 网 络 。 





接 下 来 将 稳定 点 工作 为 网 络 的 杞 始 层 延吉 条 件 来 检验 工 是 否 址 的 是 稳定 点 ， 如 果 网 络 
移 定 在 这 些 点 上 ， 那 委 输 出 结果 立 应 该 等 于 T， 





结果 为 ; 





Y=T， 国 此 ， 网 络 的 稳定 点 和 确实 是 T。 


由 于 Hopficid 网 阁 不 存在 给 六 向 量 , 因此 当 函 教 sim 的 第 二 个 大 烧 采 用 蝶 
阵 形 式 时 ，Qe2; 当 科 用 单元 阵列 的 形式 时 ，| 避 TSlsfl 引 ， 





最 后 利用 一 组 核 污染 的 向 量 ， 通 过 以 上 创建 的 Hopfield 网 络 特 其 依 复出 来 ， 网 络 的 仿 
真 步 数 设 定 为 弛 汝 。 





结 梨 为 





由 此 可 见 ，Ai 恢复 到 与 T 的 第 一 列 元 姥 一 致 了 ， 这 说 明 网 络 的 回 旦 性 能 昨 不 错 的 。 
Hopfieid 网 络 的 这 一 功能 ， 特 别 适 人 台 于 图 像 补 正 、 自 动 目标 识别 等 领域 。 


利用 Tewhop 创建 的 Hopfeld 网 络 : 权 值 函 喜 采用 dotprod， 栓 入 函 教 采 
用 netsum， 传 送 画 数 娄 用 stalins， 而 网 络 的 权 慎 是 自身 反锁 的、 


2.9 小 结 


杯 章 首先 介绍 了 一 些 重 机 的 神经 网 络 工 具 厢 通用 函 燥 ， 对 它们 的 函数 格式 、 调 用 方 活 
和 注意 事项 等 进行 了 详细 的 说 明 。 技 照 这 种 格式 ， 接 下 来 还 分 别 介绍 了 感知 器 、BP 网 络 、 


是 了 
ER 





成 性 网 络 、 自 组 织 竞争 网 络 径 向 基 网 络 和 反馈 网 络 的 神经 癌 归 工 具 钉 通 才 . 读者 看 完 本 
章 后 ， 对 神经 网 络 工具 箱 应 该 有 了 初步 的 掌握 ， 可 以 利用 某 些 函数 来 解决 一 些 比 较 简 单 的 
实际 问题 ， 但 要 想 全 面 掌握 利用 神经 网 络 工具 箱 来 解决 问题 的 过 程 ， 还 要 接着 往 下 和 看， 


羡 
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第 3 和 草 前 向 型 神经 网 络 理论 及 
MATLAB 实现 


前 向 型 神经 了 网络 结 梅 是 层 阶 型 的 ， 信 息 值 可 以 从 输入 层 单元 传播 到 它 上 一 层 的 单元 。 
第 一 晨 的 单元 与 第 二 层 所 有 的 单元 相连 ， 第 二 层 又 与 其 上 一 层 单 元 相连 ， 同 一 层 中 的 各 单 
元 之 间 没 有 连接 。 前 向 网 络 中 神经 元 的 输入 输出 关系 ， 可 采用 线性 阐 值 重 变 换 或 单元 上 升 
的 非 线 性 变换 ， 它 们 的 权 算 法 都 是 采用 有 教师 的 8 学 习 律 。 根 据 神 经 元 输入 输出 传递 郴 数 
的 差异 . 学 习 算 法 和 网 络 结 检 上 的 某 些 区 别 ， 可 将 前 向 型 神经 网 络 分 为 感知 器 网 络 、BP 网 
络 . 线性 网 络 . 径 向 基 网 络 以 及 GMDH 网 络 等 不 同 的 网 络 模型 . 本 章 将 针对 以 上 网 络 类 型 ， 
对 其 理论 基础 进行 简单 说 明 , 并 重点 介绍 如 何 利 用 MAITLAB ?7 神经 网 络 工具 箱 实现 这 些 了 网 
络 ， 

本 章 主 要 内 容 : 

看 ” 感 起 器 网 络 及 MATLAB 实现 
BP 网 络 及 MAITLAB 实现 
线性 神经 网 络 及 MATLAB 实现 
径 向 基 函 数 网 络 及 MATLAB 实现 
GMDH 网 络 及 MATLAB 实现 


3.1 感知 器 网 络 及 MATLAB 实现 


感知 器 网 络 是 由 M-P 网 络 发 展 而 来 的 ， 它 是 一 个 线性 阔 值 单元 组 成 的 网 络 ， 它 的 结构 
和 学 习 算 法 非常 简单 ， 是 其 他 前 向 型 神经 网 络 的 基础 。 特 别 地 ， 由 于 感知 器 的 隆 含 屋 神经 
元 是 线性 的 ， 因 此 ， 隐 单元 的 选取 相对 于 其 他 由 非 线 性 阁 值 单元 组 成 的 网 络 (如 BP 网 络 
等 ) 要 容易 得 多 。 对 感知 器 网 络 的 研究 、 分 析 与 变 计 ， 吕 以 为 其 他 网 络 的 分 析 与 设计 提供 
理论 依据 和 知识 基础 。 

感知 器 网 络 分 为 单 层 感知 器 和 多 层 感知 器 神经 网 络 。 本 节 针 对 这 两 类 感知 器 展开 讨论 。 
如 黑 温 有 特别 注 明 ， 以 后 都 用 感知 器 作为 单 层 感知 如 的 简称 。 


3.1.1 单 层 感知 器 网 络 








1. 单 层 感知 器 网 络 理论 
感知 器 是 在 M-P 模型 的 基础 上 建立 起 来 的 单 神经 元 的 网 络 ， 其 网 络 基 本 结构 如 图 3-1 
所 示 。 网 络 的 基本 特性 ， 也 就 是 神经 元 的 工作 特性 ， 末 归纳 为 以 下 几 点 。 








17) ) 感知 可是 一 个 多 输入 、 单 输出 的 运算 系统 , 表示 了 神经 元 的 运算 特性 。 它 的 输入 
状态 向 量 可 记 为 : 
和 (XI sr) 
其 中 ， 输 入 分 量 所 表示 第 ! 个 神经 元 的 状态 。 
记 wa=(wi wa 为 权 向 量 ， 其 中 由 表 示 第 并 个 神经 元 与 感知 器 的 连接 权重 . 


和 








图 3-1 ”感知 器 网 络 基本 结构 


《2) 感知 器 的 状态 值 可 以 作为 感知 办 的 输出 ， 它 是 由 输入 向 量 交 、 权 值 向 量 @, 和 闪 


值 向 量 疡 共同 决定 的 ， 通 过 一 个 运算 函数 T{.) 得 到 输出 。 最 常用 的 运算 函数 为 ; 


Z = 儿 | 衬 ws -外 | oz] 


其 中 ，m = -《〈 阅 值 向 量 ) (we) ， 为 位 于 区 间 [ - 1.4] 之 间 的 单调 递增 函数 ， 称 为 激 





励 函 数 。 而 
六 和 


称 为 感知 器 的 整合 函数 。 激 励 函 数 的 要 求 是 连续 可 徽 、 单 调 递增 和 对 称 的 ， 例 如 ， 可 

将 激励 函数 定义 为 ， 
2 
1 =ieSpC 

感知 器 的 基本 功能 是 对 外 部 的 神经 元 进行 “感知 ”与 “识别 ”。 也 就 是 说 ， 当 外 部 的 神 
经 元 处 于 一 定 的 状态 时 ， 感 知 器 就 呈现 “兴奋 ”状态 ， 而 当 外 部 的 神经 元 处 于 另 一 种 状态 
时 ， 感 知 器 就 呈现 “抑制 ”状态 。 因 此 ， 感 知 器 的 输出 一 般 为 0 或 1 状态 ， 这 样 就 可 以 很 
容易 地 对 模式 进行 分 类 。 

感知 器 的 学 习 是 有 教师 的 学 习 ， 权 值 可 以 通过 学 习 进 行 调整 。 学 习 算 法 的 步 柠 如 下 。 


(1) 设置 权重 的 初始 值 w (0 (了 = 01…2》 为 较 直 的 随机 非 0 值 。 





乓 
3 





(2) 给 定 输入 、 输 出 样本 向 量 ， 也 就 是 导师 信号 x /ad ,P= 上 2 …, 也 ， 其 中 ， 
和 (0 


1 E 岂 
好 一 ” 
机 一 上 总 研 吾 


式 中 ， 如 pg 一 1 。 
3) 求 感知 器 的 输出 zz 


<p (可 一 咱 2 (xp 


(4) 权 值 调整 
@| (+ 了 =)( 昌 +T(a 一 z (jx 
其 中 ，! 表示 第 上 次 调整 入 值 : 中 表示 学 习 速 率 ， 用 于 控制 训 值 调整 速度 ， 且 0<ms1。 
(5) 如 果 z (人 =4. ， 则 学 习 停止 ， 否 则 ,返回 第 〈3) 步 。 


感知 器 的 算法 规则 属于 榜 度 下 降 法 ， 如 果 目 标 向 量 存 在 , 那么 经 过 有 限 次 循环 迭代 后 ， 
一 定 能 够 收 各 到 正确 的 目标 向 量 。 由 此 可 抑 ， 学 习 结 束 后 的 网 络 ， 将 样本 模式 以 权 值 和 靖 
值 的 形式 ， 分 别 记 忆 【《 存 储 ) 于 网 络 中 。 

另外 ， 对 于 单 层 感知 器 ， 有 一 个 重要 的 定理 ， 即 如 果 输 入 的 两 类 模式 是 线性 可 分 集合 ， 
那么 学 习 算 法 一 定 站 和 你。 也 就 是 说 ， 感 知 器 一 定 可 以 成 功 地 将 两 类 模式 进行 正确 分 类 。 

由 此 ， 可 以 得 出 另外 一 个 结论 ， 即 如 果 输 入 的 两 类 模式 并 非 线 性 可 分 的 ， 那 么 学 习 算 
法 就 不 收 黎 。 也 就 是 说 ， 感 知 器 只 可 以 对 线性 可 分 的 向 量 集合 进行 分 类 。 而 判断 一 组 向 量 
集合 是 否 为 线性 可 分 是 相当 困难 的 ， 尤 其 是 当 向 量 集合 的 元 素数 量 非常 大 时 。 因 此 ， 如 果 
尝试 利用 感知 器 对 非 线 性 可 分 的 向 量 集 合 进行 分 类 时 ， 学 习 算 法 就 会 处 于 一 种 无 休止 的 循 
环 状 态 ， 沾 费 大 量 的 计算 资源 ， 这 是 感知 器 存在 的 一 个 比较 严重 的 缺陷 。 

些 外， 如果 和 输入 样本 向 量 集 合 中 存在 奇异 样本 〈 即 该 样本 相对 于 其 他 样本 特别 的 大 或 
特别 的 小 )， 学 习 算 法 就 会 运算 得 很 慢 。 

最 后 ， 由 于 感知 器 的 输出 只 有 0 和 1 两 种 状态 ， 因 此 它 只 能 对 输入 模式 进行 比较 简单 
的 分 类 。 

2. 单 层 感 知 器 的 MAILAB 实现 

MAITLAB 7 的 神经 网 络 工 具 箱 中 为 单 居 感知 器 提 设 计 ， 训练 和 学 习 等 提供 了 专门 的 函 
效 工 具 ， 包 括 : 

条 设计 函数 hewp 

雪 ”训练 函数 learmp 和 learnpn 
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量 二 人 而 计 

En 辣 宁 ESNMATLAB5wWi 
自 适 庶 函 骨 adapt 和 adaptwtbh 
调 谍 函 燥 imain 和 naiawh 
网 络 情 真 函 数 siim 
韦 始 化 国 数 放 i 

量 。 心 道 函 煌 hardlim 和 hardlirngs 

可 以 利用 世上 函数 进行 感知 器 的 设计 。 盆 析 及 应 用 ， 这 些 函 散 的 动 紫 朋 调用 格式 等 已 
瘤 在 第 2 章 中 进行 了 详 姻 说 明 。 区 而 已 妈 提 到 ， 感 知 器 的 主要 功能 就 是 进行 杠 式 分 类， 在 
络 定 了 输入 向 量 P， 目标 向 量 T 后， 可 以 通过 某 种 学 习 规 则 对 输 太 模式 进行 成 功 谷 并 ， 

下 面 ， 我 们 以 证 计 一 个 基 输 六 的 草 层 感知 句 为 例 ， 详 细 疗 绍 如 何 设计 并 应 用 一 个 单 屋 
感知 器 的 方 武 。 语 奢 短 婴 的 同 络 姑 构 如 图 32 所 示 . 由 图 可 见 ,其 采用 的 忧 通 函数 滞 harndlimn。 


最 上 巧 向 各 种 赋 元 
7 


要 1 必 
二 
图 3 单 屋 盛 知 的 网 北 结构 
首先 ， 在 利用 函数 mewp 设计 一 个 嘻 知 器 网 络 之 前 ， 需 要 先 设 定 输 大 向 量 的 范围 向 量 
ET，PT 是 一 个 有 X2 维 的 姑 阵 ， 其 中 及 为 输入 向 量 户 的 竣 数 。 


其 中 ， 和 春明 “1” 表 示 只 有 一 沾 神 凤 元 ， 由 pewp 的 调用 格式 可 知 ， 后 面 的 两 小 做 数 为 
"”% 囊 示 采用 函 是 的 默认 值 ， 分 别 设 定 对 知 器 的 传道 函 葱 玖 harlim、 学 习 函 吉 为 learmmp。 因 
此 ， mei 是 请 足 材 求 的 昔 屋 感知 器。 奶 果 设计 一 个 传道 函 是 为 hbardlina， 学 习 函 数 汶 learmpa 
的 单 屋 感 知 映 ， 0 









设计 好 的 感知 器 井 不 能 马上 没入 使 用 。 通 过 样本 训练 ， 确 定夺 知 狼 的 权 值 和 冯 值 。 感 
知 器 网 络 的 训 蝶 过 程 为 ， 对 于 给 定 的 输 和 向量， 计算 网 络 的 实际 输出 ， 并 与 相应 的 目标 向 
重 进 行 比 较 ， 得 到 误 莽 e， 些 后 根据 相应 的 学 习 规 网 调整 权 值 和 阅 值 。 重 新 计算 网 络 在 新 
的 权 值 和 交 值 作用 下 的 输出 ， 重 复 上 述 的 权 值 和 间 值 的 调整 过 程 ， 直 到 网 络 的 输出 与 期 望 
的 目标 向 量 相等 或 者 刘 练 砍 数 达到 预定 的 量 大 次 数 时 才 停 止 训 红 。 之 所 以 要 设 定 最 坟 训 蝶 
次 数 ， 是 因为 对 于 有 些 问 题 ， 感 知 器 的 学 习 算法 可 能 不 会 收效 ， 这 也 是 感知 器 网 络 的 严重 
缺陷 之 一 。 这 里 利用 函数 tain 对 感知 器 进行 名 妖 ， 调 用 格式 为 : 






伐 权 中 的 第 一 行 表示 预先 设 定 的 最 天 训练 次 数 为 10 次 , 感知 器 经 过 10 次 训练 后 停止 
如 果 在 10 次 以 肉 ， 堵 知 器 已 坚 得 到 了 理想 的 输出 ， 风 训练 自动 停止。 
感知 吴 的 输出 是 通过 仿真 函数 sim 得 到 的 ， 调 用 格式 为 ， 


峡 


和 生硬 3 
= 古 夯 二 原本 王 LE 


Y 表示 感知 器 的 输出 向 量 ， 访 函数 在 一 定 的 权 值 和 交 性 下 ， 根 据 络 定 的 输入 向 量 ， 确 
定 感知 器 的 输出 。 

例 3.1 给 定 样本 输入 向 量 P， 目 标 向 量 工 及 希 要 进行 分 类 的 输入 向 量 组 Q， 设 计 一 个 
单 屋 感知 器 ， 对 其 进行 分 类 。 
MATLAB 代码 如 让 









运行 绪 音 如 图 3.3 所 示 。 由 图 可 见 ， 所 设计 的 感 如 器 对 输 人 模式 进行 了 成 功 的 分 类 。 


， 和 标 辆 本 加 昌林 
章 证 
面 下 
醒 让 
03 
有 出 
到 
十 直 
本 下 
林 杏 
1 
碾 直 
图 王 + 葵 六 疝 量 两 分 芝 赋 
”感知 蜘 训 艇 站 果 为 ， 







可 见 ， 经 过 3 次 调 练 后 ， 网 络 日 标 误 名 达到 要 求 ， 如 图 3-4 所 示 。 
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下 面 给 出 一 个 线性 不 可 分 的 例子 。 给 定 一 个 双 元 素 的 输入 向 量 组 P， 每 列 都 由 和 个 元 
素 组 成 ， 并 蛤 定 一 个 目标 向 量 T。 利用 以 下 代码 可 将 其 绽 制 在 一 个 平面 上 。 运 行 结果 如 图 


3.5 所 示 。 











TCD 


于 
三 们 
图 35 样本 点 的 分 布 且 相 应 的 粘 别 


接 下 来 尝试 设 计 一 个 感知 骂 ， 该 感 如 器 必须 将 输入 向 量 P 进行 准 交 的 分 类 。 利用 函数 


创建 一 个 感知 器 。 er 
在 利用 感知 器 进行 分 类 之 前 ， 首 先 需 要 对 感知 器 进行 初始 化 ， 特 其 权 值 设 定 为 0 这 


感知 器 必须 经 过 训练 才能 应 用 ， 在 这 里 使 用 自 适应 函数 adapt 对 其 进行 调 练 ， 自 适度 


的 所 环 次 数 设 定 为 3 次 ， 缀 过 35 次 选 代 后 ， 训 练 停 止 。 代 码 如 下 ， 


是 
| 







1 











对 输入 样本 的 分 类 结果 如 图 3-6 所 示 。 由 图 可 见 ， 对 于 这 种 线性 不 可 委 的 村 式 ， 利 用 
单 层 感知 器 是 无 法 进行 正确 分 类 的 。 
该 实例 的 完整 MATLAB 代 古 如 下 : 


站 Hom lu ma seaaiel 


ET 
本 让 


图 3.6 由 性 下 可 身 样 本 的 分 对 结果 
3.1.2 委 层 感知 器 


1， 多 层 感 知 器 理论 
多 层 感知 凤 是 单 层 启 知 器 的 一 种 推广 形式 . 图 3.7 痊 出 了 一 个 三 层 感知 器 的 网 络 结 构 ， 





人 
了 等 要 关公 全 人 ,人 ， 


由 图 可 见 ， 和 输入 结 点 为 靖 个 ， 即 五 ,六 .天 ， 第 一 隐 层 有 思 个 神经 元 ， 对 应 的 输出 有 





所 ,万 ，-, 思 ;第 二 隐 层 有 殉 个 神经 元 ， 对 应 的 输出 为 ccu,-…,cC，， 整 个 网 络 的 町 出 为 y。 
整个 网 络 按照 前 馈 的 方式 进行 连接 ， 和 输入 输出 关系 为 : 
六 -| 袜 w-e 了 一 2 
ce 一 | 冯 ou -a 站 一 1 2…… 孢 
二 1 
了 一 /| 守 wa -9 
上 = 
上 趟 中 ， 太 为 第 一 路 层 第 个 单元 的 输出 ，W 为 输入 层 第 i 个 结 点 与 第 一 路 层 第 7 个 
单元 之 间 的 连接 权 值 ，B 为 第 一 隐 层 第 了 个 单元 的 冰 值 ; 同 理 ， cx 为 第 二 隐 层 第 大 个 单元 
的 输出 ，8 为 其 对 应 的 凋 值 ，vx 是 第 一 隐 层 第 j 个 单元 与 第 二 隐 层 第 天 个 单元 间 的 连接 权 
值 ，y 为 网 络 输出 ，in 为 第 二 隐 晨 第 大 个 单元 与 输出 之 问 的 连接 权 。 式 中 的 传递 函数 三 (.) 
为 0-1 函数 ， 这 也 是 每 一 个 单 层 感知 器 的 传递 函数 。 








图 3-7 密 层 感知 器 网 络 结构 


多 层 感知 器 网 络 的 信息 是 逐 层 前 向 传播 的 ， 下 层 的 各 单元 与 上 一 层 的 每 个 单元 相连 。 
输入 单元 按照 输入 /输出 关系 式 逐 层 进行 操作 ,每 层 之 间 的 连接 权 值 中 以 通过 学 习 规则 进行 
调整 。 可 以 看 出 ， 多 层 感 知 器 实际 上 就 是 多 个 单 层 感知 器 经 过 适当 组 合 设 计 而 成 的 ， 它 可 
以 实现 任何 形状 的 划分 。 


人 
画作 时 = 本 避 |， ES 


多 层 感知 器 的 隐 单 元 的 数目 而 有 财 庶 的 上 下 隐 芝 式 ， 可 殿 设 计时 塞 考 。 匈 果 需 要 对 皮 


个 输 六 样本 进行 分 类 ， 随 单元 数目 的 最 具 值 询 此 -1 量 小 值 为 机 = min[ fm;m) 关上 下 ， 其 


由， pm= 袜 | 当 而 二 i 时 ， [Fe 


下 面 通 过 设计 一 个 二 层 感知 如 来 解 次 “ 异 或 " 问 厦 。 进而 说 明 才 明 嘱 知 器 的 设计 过 程 
下 动 能 。 异 成 问题 的 输 六 样 厅 E 和 目标 商量 T 闸 表 31 所 示 。 从 几何 意义 上 淖 ， 师 六 向 量 
要 当 于 二 扒 平面 上 一 个 正方 形 的 4 站 顶点。 由 于 幸存 在 一 条 直线 可 以 将 两 个 磊 记 【11， 
寻 帮 7 与 另外 两 个 需 点 00035111 和 分开， 所 以 单 屋 感 知 器 是 无 法 实 硕 异 或 功能 的 。 


感知 器 的 网 络 结构 撤 此 方案 确定 :和 输入 结 点 m 呈 2， 输出 结 点 m=1。 隐 层 单元 数目 机 由 


这 两 企 公 式 确定 ， 可 以 看 出 2 天 而 寺 3， 这 里 我 们 到 两 =2。 在 雪 层 感知 蜂 的 结构 确定 忆 后 ， 
可 以 利用 一 定 的 学 习 规则 对 网 阁 进 行 训练 . 我 们 所 设计 的 感知 器 的 网 络 站 构 如 图 3-8 所 示 。 
囊 31 异 或 问题 内 六 虽 幅 出 美 系 






感知 器 的 训练 由 一 组 样本 组 成 的 集 各 进行 。 在 训练 姑 间 ， 将 这 些 样本 重复 送 到 感知 器 
的 输入 层 ， 通 过 调整 权 值 和 音 值 使 感知 右 的 输出 达到 目标 输出 。 





由 六 间 趟 该 屿 ANB 拓 作 
圈 38 用 于 解 忠 “ 异 或 ”问题 的 感知 器 网络 结构 


多 层 肪 知 器 可 对 输入 空间 向 量 进行 外 类， 它 的 输入 /输出 之 各 的 映射 在 一 定 程度 上 是 确 
定 的 。 一 方面 ， 它 的 抗 干 抗 能 力 和 午 棒 性 比较 ， 在 样本 存在 奇异 值 或 瞳 声 的 情况 下 ， 不 
能 得 到 正确 的 分 类 ;， 另 一 方面 ， 为 了 实现 非 线性 划分 ， 需 要 增加 局 知 如 的 层 数 ， 这 就 增加 
了 计算 难度 ， 使 得 感知 器 的 应 用 范围 受到 了 限制 

由 于 神经 网 络 工具 稍 中 没有 为 多 层 感 知 器 提供 专门 的 函数 ， 羽 乎 是 没有 办 法 利用 
MATLAB 实现 才 层 启 知 器 了 ， 其 实 不 然 ，MATLAB 的 神 坚 网 络 工具 町 中 的 定制 网 络 功能 
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1 


了 种 每 问 络 本 论 与 MATLAB 了 7 详 现 ] | 下 和 环 画面 丰 f 

本 醒 生 me 一 二 面 二 = 
可 以 帮助 我 们 解决 这 个 问题 ， 接 下 来 以 图 3.8 所 示 的 名 导 感 知 器 为 例 ， 详 细 介 绍 如 何在 神 
既 网 络 工具 箱 中 定制 网 阁 。 


2 网 络 定 兴 

首先 生成 一 让 新 的 网 络 ， 在 命 科 行 窗口 中 键 六 以 下 代码 后 就 可 以 生成 一 个 类 型 未 知 的 
网 络 。 闵 网络 不 仅 妆 型 未 知 ， 间 且 和 包括 导数 ， 畏 六 /输出 量 和 权 值 等 都 是 未 知 的 ， 在 商 令 行 
中 输入 net 后 接 回 车 键 ， 就 会 得 到 网络 的 属性 。 我 们 发 现 ， 目 前 所 有 的 属性 都 是 零 值 忒 者 
为 空 。 





接 下 来 ， 需 要 设置 网 络 的 结 梅 属性 。 这 些 属 性 包括 网 络 的 输入 层 的 数目 、 输 入 层 之 间 
的 连接 情况 。 本 例 的 设置 名 下 : 






这 意味 着 网 络 是 一 个 两 层 网 络 ， 有 一 个 输入 谭 。 


netnuminputs 指 的 是 输入 源 的 的 四 ,而 不 是 在 一 个 输 久 向 量 中 的 元 素 的 数 
目 。 元 素 询 康 目 即 网 结 输 入 靶 神 经 元 的 个 教 ， 设置 梅 式 泳 DELLaYers 人 |,Sizes 


炬 后 役 置 网 络 的 阔 值 输入 权 值 、 屁 的 术 值 ， 输 出 与 目标 的 连 捷 情况 。 相 例 中 ， 网 络 
未 身 是 一 个 前 慎 网 络 ， 所 以 屋 连 接应 该 设置 为 (io， 即 信息 只 有 通过 第 1 导 才 可 以 心 播 
到 第 层 ， 了 网络 的 输入 只 和 第 1 屋 相连 ， 两 屋 都 存在 权 值 向 量 。 第 2 层 存在 目标 向 量 ， 输 
出 也 处 于 访 层 。 国 此 ， 属 性 的 设置 代码 为 : 












接 下 来 ， 需 要 设置 笃 层 的 属性 ， 亿 括 神 经 元 的 个 数 、 传 递 函 数 。 输 入 向 量 的 范围 和 初 
巡 化 函 监 等 ,本 例 中 , 儿 屋 感知 器 的 第 1 层 有 了 个 神 竖 元 , 传递 函数 为 硬 限 幅 函 数 hardlim， 
输 闪 向 量 的 范围 入 中 ;输出 屋 即 第 2 屋 , 有 1 个 神经 元 ,传递 函数 亦 为 硬 限 幅 函 数 hardlim。 
两 层 的 初始 化 函数 都 采用 Nguyen-Wiodrow 函数 initmw。 设置 格式 为 : 












量 后 ， 需 要 设置 网 络 的 整体 属性 ， 即 性 能 函数 。 调 练 函数 和 初始 化 函数 等 ， 本 例 中 ， 
性 能 函数 区 均 方 差 函数 为 mse， 调 练 函 数 为 tminlm， 初 姓 化 函数 为 initlay。 设 置 格式 为 












到 此 为 止 ， 一 个 完整 的 过 层 感知 器 就 设计 好 了 。 十 一 步 就 是 设置 训练 参数 对 其 进行 调 
氏 ， 利 用 其 实现 异 或 功能 。 训 练 候 三 与 ， 


网 络 训练 结果 为 ， 






可 见 ， 利 用 uainlm 函数 进行 训练 ， 在 第 18 光 的 时 候 ， 达 到 了 量 小 梯度 ， 但 网 络 目标 
误 葡 各 设 有 达到 ， 此 时 的 调 练 误差 居 不 50732e-012， 如 图 39 所 示 。 





示 让 而 和 ET 二 人 语 DT 全 地 加 
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图 3.5， 训 统 站 果 


为 了 检验 同 络 的 性 能 是 否 达到 要 求 ， 在 合 季 行 窗口 中 输入 ， 








可 见 ， 此 时 的 网 络 已 经 实现 了 异 或 动能 ， 这 是 因为 丰 50732e-012 的 误差 实际 上 已 经 非 
常 小 了 。 


3.2 BP 网 络 及 MATLAB 实现 


BP 网络 是 一 种 多 层 前 镇 神经 网 络 , 名 宁海 于 网 络 权 值 的 调整 规则 采用 的 是 后 向 传播 学 
习 算 法 ， 即 BP 学 习 算 法 ，BP 学 习 算 法 是 Rumelhar 等 在 1986 年 提出 的 ， 自 此 以 后 ，BP 


邓 





神经 网 络 获得 了 广泛 的 实际 应 用 。 据 统计 ， 80% 一 90%% 的 神经 网 络 模型 采用 了 BP 网 络 或 者 
它 的 变化 形式 。BP 网 络 是 前 向 网 络 的 核心 部 分 , 体现 了 神经 网 络 中 最 精华 , 最 完美 的 内 容 。 


3.2.1 _BP 网 络 理论 





1. BP 网 络 结构 

BP 网 络 是 一 种 单 向 传播 的 多 野 前 向 网 络 ， 其 结构 如 图 3.10 所 示 。 由 图 可 见 ，BP 殉 络 
是 一 种 具有 三 层 或 三 层 以 上 的 神经 网 络 ， 包 括 输入 层 、 中 间 层 〈 隐 层 ) 和 输出 层 。 上 下 层 
之 间 实 现 全 连接 ， 而 每 屋 神 经 元 之 间 无 连接 。 当 一 对 学 习 样 本 提供 给 网 络 后 ， 神 经 元 的 激 
活 值 从 得 入 层 经 各 中 间 层 向 得 出 层 传播 ， 在 输出 层 的 各 神经 元 获得 网 络 的 输入 响应 。 接 下 
来 ， 按 照 诚 少 目 标 输出 与 实际 误差 的 方向 ， 从 输出 层 经 过 各 中 间 层 逐 层 修正 各 连接 权 值 ， 
最 后 回 到 输入 层 ， 这 种 算法 称 为 “误差 道 传播 算法 ”， 即 BP 算法 。 戎 着 这 种 误差 逆 的 传播 
修正 不 断 进 行 ， 网 络 对 输入 模式 响应 的 正确 率 也 不 断 上 升 。 

与 感知 器 模型 不 同 的 是 ， BP 网 络 的 传递 函数 要 求 必 须 是 可 微 的 ， 所 以 不 能 使 用 感知 器 
网 络 中 的 二 值 函 数 ， 常 用 的 有 Sigmaoid 型 的 对 数 、 正 切 函 数 或 线性 函数 。 由 于 传递 函数 是 
处 处 可 微 的 ， 所 以 对 于 BP 网 络 来 说 ， 一 方面 ， 所 划分 的 区 域 不 再 是 一 个 线性 划分 ， 而 是 
由 一 个 非 线性 超 平 面 组 成 的 区 域 ， 它 是 比较 平滑 的 曲面 ， 因 而 它 的 分 类 比 线性 划分 更 加 精 
确 ， 容 错 性 也 比 线 性 划分 更 好 ; 另 一 方面 ， 网 络 可 以 严格 采用 梯度 下 降 法 进行 学 习 ， 权 值 
修正 的 解析 式 十 分 明确 。 














图 3-10 BP 网 络绎 构 


2.BP 况 络 学 习 规 则 

这 里 不 讨论 学 习 规则 的 数学 推导 过 程 ， 只 给 出 学 习 过 程 及 步骤 ， 以 供 设计 与 分 析 BP 
网 络 时 作为 套 考 。 我 们 以 一 个 三 层 BP 网 络 为 例 ， 介 绍 BP 网 络 的 学 习 过 程 及 步骤 。 

在 介绍 之 前 ， 首 先 对 各 符号 的 形式 及 意义 进行 说 明 。 


网 络 输入 同 量 严 = 人 





网 络 月 标 向 量 孔 一 人 
中 间 层 单元 输入 向 量 8 ={so5s)， 和 输出 向 量 吕 = ( 八 , 区 bj 


输出 层 单元 输入 向 量 五 = 侣 ,5 … 光 )， 输 出 向 量 Ce = (ec co 
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输入 层 至 中 间 层 的 连接 权 Wi 下 本 2， 大 12 
中 间 层 至 输出 层 的 连接 权 ww， 广 1.2,…… 产 ， 仁 1.2,…， 

中 间 晨 各 单元 的 输出 阀 值 几 ， 关 12 

输出 层 各 单元 的 输出 阔 值 yy， 产 1.2…P; 

参数 人 [2…，ma。 

《17 初始化。 给 每 个 连接 权 值 ww 、vr、 阅 值 D 与 九 赋 予 区 间 ( - 1,1) 内 的 随机 值 。 


(2) 随机 选取 一 组 输入 和 目标 样本 琉 = [Gf ,人 人 ] 下 = (各 ,下 5} 提 供给 


网 络 。 
(3) 用 输入 样本 中 = (af, as，…,e@] 、 连 接 权 w, 和 阐 值 6 计算 中 间 层 各 单元 的 输入 





5 ， 然 后 用 8) 通过 传递 函数 计算 中 间 层 各 单元 的 输出 吕 。 


5 = 六 4 一 了 = 上 2 


=] 


5 =7() 12 
(4) 利用 中 间 层 的 输出 访 、 连 接 权 ?Yi 和 浆 值 Y 计算 输出 层 各 单元 的 输出 五 ， 然 后 利 


用 通过 传道 通 数 计算 输出 层 各 单元 的 响应 CC ， 


记 = 六 -12…4 


1 


C = 了 ( 瑟 ) 二 -12 
(5) 利用 网 络 目标 向 量 下 =( 冰 , 关 只 ]， 网 络 的 实际 输出 C, ， 计 算 输 出 层 的 各 
单元 一 般 化 误差 必 。 


必 =( 闪 -CjiC(I-C) 4=12…9 








《67 利用 连接 权 ， 、 输 出 层 的 一 般 化 误差 也 和 中 间 层 的 输出 已 计算 中 间 层 各 单元 的 


一 般 化 误差 ej 。 
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7) 利用 输出 层 各 单元 的 一 般 化 误差 必 与 中 间 层 各 单元 的 箱 出 户 来 修正 连接 权 V， 和 


阅 值 7 。 
1 (+HU=m(N)+Q -已 
JCYT+ 二 = 和 (YY)TC 二 
一 2 


(8) 利用 中 间 层 各 单元 的 一 般 化 误差 et ， 输 入 层 各 单元 的 输入 已 = (aas，…,a,) 来 


修正 连接 权 WwW 和 了 阔 值 如 。 
WIN+L) = {N)+ Berar 
9 (w+lH=6(N)+pei 
一 1.2) 下 2Dp, DO< 有 <1! 
(9》 随机 选取 下 一 个 学 习 样 本 向 景 提 供给 网 络 ， 返 回 到 步骤 (3)， 直 到 六 个 训练 样 
本 训练 完毕 。 
(10) 重新 从 六 个 学 习 样 本 中 随机 选取 一 组 输入 和 目标 样本 ， 返 回 步骤 (3)， 直 到 网 
络 全 局 误差 E 小 于 预先 设 定 的 -- 个 极 小 值 , 即 网 络 收 部 。 如 果 学 习 次 数 大 于 预先 设 定 的 值 ， 
网 络 就 无 法 收 伍 。 
(11) 学 习 结束 。 
可 以 看 出 ， 在 以 上 学 习 步 又 中 ，(7) 一 〈8) 步 为 网 络 误 差 的 “ 逆 传 播 过 程 ”，!9) 一 
(10)》 步 则 用 于 完成 训练 和 收敛 过 程 。 
通常 ， 经 过 训练 的 网 络 还 应 该 灶 行 性 能 测试 。 测 试 的 方法 就 是 选择 铀 试 样本 向 量 ， 将 
其 提供 给 了 网络， 检验 网 络 对 其 分 类 的 正确 忻 。 测 试 样 本 向 量 中 应 包含 今后 阿 络 应 用 过 程 中 
可 能 遇 到 的 主要 典型 模式 。 这 些 ， 样 本 可 以 通过 直接 测 取 得 到 ， 也 可 以 通过 仿真 得 到 ， 在 
样本 数据 较 少 或 者 较 难 得 到 时 ， 也 可 以 通过 对 学 习 样本 加 上 适当 的 噪声 或 按照 一 定 规 则 插 
值得 到 。 总 之 ， 一 个 良好 的 测试 样本 集中 不 应 谅 包 售 和 学 习 样 本 完全 相同 的 模式 。 
3, BP 网 络 设计 技巧 
(1) 输入 和 输出 层 的 设计 
输入 的 神经 元 可 以 根据 需要 求解 的 问题 和 数据 表示 方式 确定 。 如 果 输 入 的 是 模拟 信号 
波形 ， 那 么 输入 层 可 以 根据 波形 的 采样 点 数目 决定 输入 单元 的 维 数 ， 也 可 以 用 一 个 单元 输 
入 ， 这 时 输入 样本 为 采样 的 时 间 序 列 ; 如 果 输 入 为 图 像 ， 则 输入 单元 可 以 为 图 像 的 像素 ， 
也 可 以 是 经 过 处 理 的 图 像 特征 。 
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0 
答 出 层 的 维 数 可 根据 使 用 者 的 要 求 确 定 。 如 果 将 BP 网 络 用 做 分 类 器 ， 类别 模式 一 共 
有 兽人 个 ， 于 么 输出 层 神 经 元 的 个 煞 为 下 或 1og; 瑞 


【2) 隐 层 的 设计 

对 于 BP 网 络 ， 有 一 个 非常 重要 的 定理 。 即 对 于 任何 在 困 区 河内 的 一 个 连续 函数 部 可 
以 用 单 隐 屋 的 BP 网 络 通 近 ， 因 而 一 个 三 层 BP 网 络 就 可 以 完成 任意 的 # 维 到 六 维 的 且 射 。 

隐 层 的 神经 元 数目 选择 是 -个 十 分 复杂 的 问题 ， 往 往 需要 根据 设计 音 的 经 验 和 多 次 实 
验 来 确定 ， 因 而 不 存在 一 个 理想 的 解析 式 来 表 冰 。 隐 单元 的 数目 与 问题 的 要 求 、 输 入 /输出 
单元 的 数目 都 有 着 直接 关系 。 隐 单元 数目 太 多 会 导致 掌 习 时 间 过 长 、 误 差 不 一 定 最 佳 ， 相 
全 不 能 识别 以 前 没有 看 到 的 样本 ， 因 此 一 定 存 在 一 个 最 佳 的 隐 单 元 数 。 

3 个 公式 可用 于 选择 最 佳 陷 单 元 数 时 的 参考 公式 。 




















D) 他 Ci > 大 ， 其 中 ,大 为 样本 数 , 血 为 隐 单 元 数 ,为 输入 单元 数 ,如 果 1> 站 ,Ci = 0。 


了 ) 现 三 天 十 FE 十 站 ， 其 中 ， FF 为 输出 神经 元 数 ， 严 为 输入 单元 数 ， 站 为 [110] 之 间 的 常 煞 。 


3 向 =logs#， 其 中 ,为 输入 单元 数 。 


还 有 一 种 途径 可 用 于 确定 隐 单 元 的 数目 。 首 先 使 隐 单 元 的 数目 可 变 ， 或 者 放 人 足够 多 
的 隐 单 元 ， 通 过 学 习 将 那些 不 起 作用 的 隐 单 元 别 除 ， 和 直到 不 可 收缩 为 止 。 同 样 ， 也 可 以 在 
开始 时 疙 入 比较 少 的 神经 元 ， 学 习 到 一 定 次 数 后 ， 如 果 不 成 功 则 再 增加 隐 单 元 的 数目 ， 直 
到 达到 比较 合理 的 隐 单 元 数目 为 止 。 

4. 初始 值 的 选取 
由 十 系统 是 非 线性 的 ， 初 始 值 对 于 学 习 能 否 达 到 局 部 其 小 和 是 否 能 够 收 竹 的 结果 关系 
搬 大 。 一 个 重要 的 要 求 是 ， 初 始 权 值 在 输入 累加 时 使 每 个 神经 元 的 状态 值 接 近 于 零 ， 权 值 
一 般 取 簿 机 数 ， 要 比较 小 。 输 入 样本 也 同样 希望 进行 归 一 化 处 理 ， 使 那些 比较 大 的 输入 仍 
落 在 传递 函数 梯度 大 的 地 方 。 

5.BP 了 况 络 的 不 足 及 改进 

虽然 BP 网 络 得 到 了 六 泛 应 用 ， 但 其 自身 也 存在 一 些 缺 陷 和 不 足 ， 主 要 包括 几 个 方面 
的 问题 . 

首先 ， 由 于 学 习 速 率 是 固定 的 ， 因 些 ， 网 络 的 收 误 速度 慢 ， 需 要 较 长 的 训练 时 间 。 对 
于 一 些 复 杂 的 问题 ，BP 算法 需要 的 训练 时 间 可 能 会 非常 长 。 这 主要 是 由 于 学 习 加 率 太 小 造 
成 的 ， 可 采用 变化 的 学 习 速 率 或 自 适应 的 学 习 速 率 加 以 改进 。 

其 次 ，BP 算法 可 以 使 权 值 收敛 到 某 个 值 ， 但 并 不 能 保证 其 为 误差 平面 的 全 局 最 小 值 ， 
这 是 因为 采用 樟 度 下 降 法 可 能 会 产生 - -个 局 部 最 小 值 。 对 于 这 个 问题 ， 可 以 采用 附加 动量 
法 来 解 次。 

香 次 ， 网 络 隐 含 居 的 层 数 和 单元 数 的 选择 尚 无 理论 上 的 指导 , 一 般 是 根据 经 验 或 者 通过 反 
复 实 验 确 定 。 因 此 ， 网 络 往往 存在 很 大 的 元 余 性 ， 在 一 定 程度 上 也 增加 了 网 络 学 习 的 负担 。 
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最 后 ， 网 络 的 学 习 和 记忆 具有 不 条 定性 。 也 就 是 说 ， 如 时 增 加 了 学 习 样 本 ， 名 练 好 的 
间 冶 就 需要 从 头 开始 重新 训练 ， 对 于 以 前 的 权 值 和 间 值 是 役 有 记忆 的 。 


3.2.2 BP 网 络 的 MATLAB 设计 


下 面 以 一 个 单 陷 屋 的 BP 网 络 设 计 为 例 , 介绍 利用 杆 勾 网 络 工具 菠 进 行 BP 网 络 设计 股 
分 析 的 过 程 ， 

前 面 已 经 提 到 ， 对 于 BP 网 络 ， 存 在 一 个 重要 的 结论 ， 邮 单 隐 层 的 卫 P 网 络 可 以 遇 近 任 
意 的 非 战 性 肤 射 ， 前 可是 隐 舍 层 的 神经 元 个 数 可 以 随意 调整 因此， 为 了 简单 起 见 ， 这 里 
利用 一 个 单 隐 导 的 BP 同 络 索 各 近 一 个 函数 ， 






1. 问题 儿 述 
通过 对 函 的 输 六 变量 下 和 目标 变量 T， 分 别 为 : 
一 本 全 二 人 草 开 


5 了 | 看 届 可 4 TS 是 -年 
和 
可 以 将 输入 向 量 和 目标 向 量 绽 制 在 一 起 ， 如 图 3-11 所 示 - 


也 mn 





1 
站 于 9 


有 :21 诅 数 据 ， 


忆 
丫 亏 


。 竹 组 向 量 都 


IE 了 


几 
有 in 忆 


图 3 和 函数 诛 列 


2 网 络 设计 
该 同 绕 的 输入 层 和 输出 层 的 神经 元 个 数 蜀 为 1， 根 据 以 上 的 隐 舍 层 设计 经 验 公式 ， 以 

及 考 志 本 例 的 实际 情况 ， 杉 决 该 间 题 的 网 络 的 隐 层 神经 元 个 数 应 该 在 3 一 8 之 间 。 因 此 ， 下 

面 设 计 一 个 隐 千 层 神 经 元 数目 可 变 的 BP 网 络 ， 通 过 误差 对 比 ， 确 定 最 性 的 隐 售 旦 神经 元 

个 数 ， 并 检验 陷 舍 层 神 经 元 个 整 对 网 络 性 能 的 影响 ， 

网 络 的 被 计 及 训练 代码 如 下 ， 








由 此 可 网， 网 北 的 陷 河 层 神 经 元 的 传道 函数 为 unsig， 输 出 屋 神 经 元 的 传递 函数 为 
logsig， 这 是 因为 目标 向 重 的 元 素 都 位 于 区 间 [ -1.0 中 ， 正 好 注 足 函数 tansig 的 输出 要 求 。 










上 上 玉 伐 本 的 运行 周 黑 见 表 32 。 
表 3.2 网 赂 册 几 课 基 
FT 十 必 王 二 | 上 主人 7 
全 二 有 二 manm | mana| am| ul | 


表 3-2 表明 ， 在 经 过 2000 次 训练 后 【 训 蝶 函数 采用 Imaingdx1， 隐 言 层 神经 元 为 & 的 
BP 同 络 对 函数 的 通 近 效果 最 好 ， 因 为 它 的 误差 最 小 ,而且 同 络 公 过 232 次 训练 就 达到 了 卓 
标 误 益 ， 隐 会 是 为 5 和 9 的 网 络 误 壮 也 比较 小 ， 但 它们 所 需要 的 训练 时 间 比 较 长 ， 考 虑 到 
网 络 性 能 的 训练 速度 ， 这 里 将 网 络 隐 沼 屋 的 术 经 元 数目 设 定 为 8。 


人 禾 - 从 表 3-2 中 还 可 得 出 一 本 重要 的 站 论 ， 点 是 并 非 隐 膏 项 神 蚂 所 的 沾 南 直 
训 ， 同 蜂 的 性 能 就 超 好 。 存 本 全 中 ， 误 是 并 温 有 明显 地 随 着 用 和 周 导 种 旺 元 加 由 
指 增加 而 成 小 的 越 殷 ， 娄 当 有 耻 番 基 驯 经 元 的 站 可 帮 看 增 遇 到 了 时 ， 误 盖 民 而 增 

去 了 了 了， 内 虽 赠 加 到 避 和 从 号 增加 到 100 志 现 府 到 了 这 让 砚 章 。 


采用 和 在 同 的 训练 函数 对 阅 绪 的 性 能 也 有 晤 响 ， 比 如 收 北 速度 等 。 下 面 采 用 不 同 的 训 姑 
函数 对 网 赂 进行 训练 ， 并 现 察 计时 ， 

以 上 都 是 采用 函数 miagds 对 网 络 进行 训练 ， 让 丽 救 的 学 习 算法 是 柳 麻 下降 动量 法 ， 
而 且 学 习 速 率 是 自生 庶 的 。 当 隐 音 层 神 既 元 数目 为 上 时 ， 同 络 的 通 近 误差 为 各 1442。 阿 络 
的 训 妹 嬉 果 如 图 3-i 所 示 。 


二 Fr 0 地 





而 画 证 钾 下 5 


Er 和 
图 了 1 训 几 站 果 【 放 陈 画 数 Hiinedxy 
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接 下 来 采用 务 数 tminlm 对 网 阁 进行 调 练 ,该 函 数 的 学 习 蜂 法 为 evenberg-Marquadt 反 
传 民 法 ， 该 训练 函数 的 优点 在 于 收 黎 速度 很 快 。 训 练 代码 为 ; 







丰 


可 见 ， 经 过 5 次 训练 后 ， 网 络 的 目标 误差 就 达到 了 要 求 。 如 图 3.13 所 示 ，。 此 时 的 误 闫 
ITeg= 人 向 .1 dd 二 4 。 


二 Psearesem 画 让 TREE Goal 二 DSS 





图 瑟 训 此 续 时 【出 和 琵 画 数 :。 anhay 


最 后 采用 tmaingd 对 网 络 进行 训练 ， 访 函数 所 用 的 学 习 算 法 就 是 普通 的 梯度 下 降 法 . 训 
措 代 码 为 : 








训练 结果 为 ;_ 


” 可见， 经 过 2500 次 训练 后 ,网络 目标 误差 目标 依 热 没有 被 满足 ， 而 且 通 过 观察 网 络 的 
训练 曲线 ， 如 图 3-14 所 示 ， 同 络 的 训练 过 程 收 黎 得 非常 绥 慢 ， 而 且 训 练 误差 cs=0.4146。 








， FTTEESE 天 癌 0 帮 二 是 二 9 
8 
| 柯 ” 
请 。 
1 = 
上 台 癌 刘 呵 1 加 二 ED 加 
ee | 站 


图 314 刘 谍 丫 果 工 训 屿 函 蜗 ，trmaiagd) 


综 间 分析 以 上 3 种 训练 过 程 ， 我 们 认为 ,函数 tainlm 收效 速度 快 ， 网 络 的 训练 误差 也 
比较 小 。 因 此 ， 这 里 采用 uainlm 对 网 络 进行 训练 。 通 过 对 调 练 好 的 网 络 进行 仿真 ， 可 以 得 
到 网 络 对 函数 的 逼近 情况 ， 代 码 如 下 






运行 结果 如 图 3-15 所 示 ， 其 中 ， 黑 点 囊 示 网 络 的 输出 结果 ，“*+” 表示 函数 的 实际 值 。 
利用 以 下 代码 可 以 挫 制 网 络 的 误差 曲线 






网 络 的 误差 曲线 如 图 3-16 所 示 。 


二 


图 3.15 函 可 通 近 搬 时 
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扣 让 语 0 吕 
国 了 入 疝 谢 的 恒基 昌 上 
至 此 ， 我 们 确定 了 本 例 的 最 此 BP 网 此 关 构 ， 如 事 433 所 示 。 


静 33 网 赂 昨 嫩 结构 









-一 ~ 
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3.3 ”线性 神经 网 络 及 MATLAB 实现 


线性 神经 网 络 和 感知 如 网 阁 在 结构 上 比较 相似 ， 区 别 在 于 线性 神经 网 络 的 传递 函 烙 为 
线性 的 ， 而 启 知 器 的 传递 函数 为 二 值 型 的 。 同 感知 器 网 络 一 样 ， 旺 性 神经 网 络 也 只 能 对 线 
性 可 分 模式 进行 分 烘 。 但 是 ， 相 对 于 冉 知 器 网 络 来 说 ， 线 性 神经 网 络 的 学 习 算 法 的 收 敏 速 
座 和 精度 都 有 较 大 程度 的 提高 。 

20 世 起 和 年 代 末 ,由 Widraw 和 Hafr 提出 的 自 适 应 训 性 元 件 是 线性 神 即 网 络 报 早 的 ， 
也 是 最 典型 的 代表 ， 


3.3.1 ”线性 神经 网 络 的 结构 
弃 性 神经 网 绍 的 神 贤 元 上 构 如 图 3-17 所 示 。 


骗 六 战 性 特 经 元 
TAO 





忆 区 2 
图 也 地 四 性 网 站 的 神 几 元 结构 
击 图 3.17 也 可 以 看 出 , 线性 神经 网 络 的 梓 蚂 元 结构 与 感知 融 的 神经 元 结构 的 差异 只 在 
于 传递 函数 的 不 同 。 乒 性 神经 网 络 的 传递 函数 为 了 (2jJ= 工 。 





一 个 由 $ 个 神经 元 构 成 的 线性 神经 网 具 构 如 图 3.18 所 示 。 由 图 可 见 ， 访 网 络 有 及 个 
输入 向 量 。 这 种 网 络 称 为 Madaline 网 络 。 
给 入 线性 神经 元 层 





如 一 bhnteit( 环 PDB 


图 3-18 线性 神经 网 络 结构 


虽然 这 兵 是 一 个 单 层 线性 网 络 ， 但 它 的 功能 和 多 属 线 性 网 络 是 一 样 的 。 任 何 一 个 多 居 
线性 网 络 ， 都 对 应 着 一 个 与 之 等 价 的 单 层 线性 网 络 。 


3.3.2 ”线性 神经 网 络 的 学 习 
本 节 以 Madaline 网 络 为 例 ， 介 绍 线性 网 络 的 学 习 过 程 。Madaline 网 络 的 学 习 过 程 是 按 
照 “ 误 差 平方 和 最 小 ”的 原则 ， 即 LMS (Least Mean Square) 算法 ， 反 复 对 各 连接 权 值 进 


行 修 正 的 过 程 。 这 里 的 误差 指 的 是 实际 输出 和 目标 向 量 之 间 的 差 值 。 这 种 学 习 过 程 所 使 用 
的 规则 称 为 Widrow-Hoff 学 习 规 则 。 


令 已 ={t 下 下 } 表 示 网 络 的 输入 向 量 ， 五 = ( 兴 , 共 ，…… 关 ) 表 示 网 络 的 目标 
向 量 。 其 中 ， 大 一 1 2,… ,看 ， 如 为 学 习 模式 《一 个 输入 向 量 与 对 应 的 目标 向 量 称 为 一 个 学 
习 模 式 ) 的 数目 , s 为 输出 层 单元 的 数目 。 负 = (wh ,wa，…yws ) 表 示 连 接 权 值 向 量 , 其 中 ， 
i =12,…., 尺 。 学 习 过 程 如 下 ， 


(1》 初 始 化 。 为 各 连接 权 值 ww 赋予 区 间 [-1，JT 内 的 随机 值 ; 


(2) 任 选 一 组 学 习 模 式 提供 给 网 络 ; 
《3) 计算 网 络 输出 值 : 


内 
攻 = 了 网 忆 7=12 5 
:人 


(4) 计算 网 络 各 输出 单元 的 实际 输出 与 目标 周 量 之 间 的 误差 : 
中 二 了 = 上 2 时 
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硬是 面 让 ， 
号 亲友 本 DSSNMATLAB :75 


【S3 进行 连接 权 值 的 修正 ， 
6 (二 下 = 两 (NW)+aa 辣 = 二 
16) 取 下 一 个 学 习 模式 提供 给 网 络 ， 重 复 步骤 (3) 一 【5)， 直 到 误差 埃 变 得 足 巾 小 
为 止 。 
Madaline 的 LMS 学 习 规则 可 保证 最 终 的 误 兰 函 数 最 小 ， 但 这 需要 进行 无 
限 决 的 学 习 ， 因 此 实际 应 用 中 只 能 得 到 近似 值 。 


3.3.3 线性 网 络 的 MATLAB 仿真 


例 了 2 这 里 给 出 一 个 输 坟 商量 臣 和 目标 向 量 下 ，P[LO，=1.3]，T= 血 5 1.01， 要 求 通 
过 设计 一 个 线性 网络 素 寻找 两 者 之 间 的 线性 法 系 。 
首先 利用 函数 mewlin 创建 一 个 线性 网 络 。 _ 





上 起 囊 示 网 阁 只 有 输出 ， 学 习 速 率 为 Q01。 接 下 来 需要 对 网 络 进行 调 练 ， 设 定 网 疝 的 
训练 吹 数 尖 500 饮 ， 目 标 误差 为 6， 训练 伐 码 为 ， 





训 弦 结果 为 ， 





可 见 ， 网 阁 利用 函数 tminb 进行 训 综 ， 在 径 过 274 次 训 蝶 后 ， 网 络 的 误差 达到 要 求 ， 
训练 针 果 徊 团 予 18 所 示 。 


1 


1 天竺 古 将 全 先 9 机 失 和 的 须 9 


[saioaiagykeagil 刘 王 到 





晤 | 
本 本 师 条” 司 曾 呈 量 击 
攻 4 
图 19， ”训练 辣 果 “【 训 账 函 册 : taiah) 


在 向 令 行 窗口 中 输入 ， 


接 回 车 键 后 ， 结 果 为 ， 





和 目标 向 量 对 比 ， 误 兰 比 较 小 。 
坎 际 上 ， 疡 和 了 之 闻 的 线性 关系 可 以 通过 方程 正好 XP4B 来 描述 ， 所 以 W 和 日 可 以 
通过 和 解 上 下面 的 方程 得 出 ， 


林寺 刘 = 避 5 
一 1 .3 到 十 及 三 1 


出 W= -02173，B=-0.7173， 了 和 日 分 别 对 应 着 网 络 的 权 值 和 山 值 ， 在 辣 令 行 窗口 中 答 





晴 果 多 ; 





“ 此 结果 与 通过 解 方 程 得 到 的 外 和 日 是 很 接近 的 所以， 上面 的 网 络 可 以 很 好 地 实现 一 
本 简单 的 线性 关系 。 

例 3.3 例 32 是 对 一 个 比较 小 的 输入 向量 和 目标 向 量 的 模式 联想 的 设计 问题 ， 接 下 来 

提供 一 个 较 大 的 多 神经 元 网 络 的 模式 联想 的 设计 问题 ， 输 六 向 量 P 和 目标 向 量 T 分 别 为 : 







由 P 和 了 可 得 ， 网 络 为 3X4 的 结构 ， 即 网 络 的 输入 层 有 3 个 神经 元 ， 输 出 层 有 4 个 
神经 元 ， 两 屋 之 间 的 神经 元 为 全 连接 。 
和 例 32 一 样 ， 本 例 的 问题 也 可 以 采用 总 性 方程 组 求解 ， 即 针对 每 个 输出 结 点 写 出 输 


1 计 


WE 人 匣 SNMATLAB 了 xmwr 

面 王 = 四 全 面 证 
六 和 输 山 之 间 的 甘 系 式 。 对 于 同 络 ， 舞 个 输出 神经 元 都 有 4 站 变量 ， 重 括 3 个 权 值 和 1 个 
痪 恒 ， 同 时 有 斗 个 限制 方程 ， 每 组 答 关 对 应 4 个 输出 值 。 这 样 一 认 ， 半 个 输出 结 点 就 可 以 
得 到 I 生 组 方程 。 因 此 ， 只 要 输入 向 量 是 线性 不 相 基 的 ， 则 同时 注 足 这 15 个 方程 的 权 值 存 
在 且 惟 一 ， 对 应 到 网 络 ， 就 是 网 络 可 以 通过 训练 找到 零 误 差 的 精确 权 值 。 

通过 以 下 代码 创建 并 训练 一 个 线性 网 络 







通过 上 述 代 三， 设置 网 络 的 训练 步 数 为 2000 次 训练 的 目标 误差 为 00001。 代 码 的 运 
行 站 肾 为 【部 分 央 果 ) 





可 见 ， 网 阁 经 过 1289 旋 调 练 后 ， 误 差 达 到 目标 误差 的 要 求 。 训 练 的 误差 曲线 如 图 3-20 
所 示 。 


用 下 EN 有 写 De 司 让 天 可 1 





图 320” 况 禾 杀 入 刘 东 古村 
在 章 寺 行 窗口 申 输 六 吉 下 代码 对 网 剃 进行 仿真 ， 





输出 结果 为 ， 










将 输出 结果 y 与 网 络 的 目标 向 量 T 相 比 较 ， 计 算 网 络 的 误差。 


ii 守 


员 曾 夯 硬 | | 
IE 


人 络 对 于 目标 向 量 列 的 误差 为 ， 





TREETTCT 





胡 果 每 个 神经 元 的 自由 应 【 即 权 值 和 阅 值 数 目 ) 等 于 或 大 于 限制 数 【 即 输入 /萌出 向 重 
对 )， 那 么 线性 网 络 就 可 以 “ 零 误差 ” 地 解决 问题 不 过 ， 如果 输 入 向 量 线性 相关 或 者 没有 
阅 值 时 ， 计 结 论 就 不 再 成 立 。 接 下 来 就 研究 这 两 种 特殊 情况 。 

例 3.4 役 计 并 训练 一 个 线性 网 络 ， 实 现 从 输入 向 量 P 到 输出 向 量 T 的 转换 ， 





从 两 个 向 量 的 结构 来 看 ， 所 设计 的 蛾 性 网 络 是 具有 阅 值 的 ， 并 且 输 大 层 的 神经 元 为 2 
让 ， 输 出 旦 的 神经 元 发 ! 个， 如 果 仔细 观 峙 ， 就 会 发 现 输 入 向 量 P 是 二 性 相关 的 。 在 这 种 
情况 下 ， 线 性 网 络 人 能够 解 决 这 个 问题 。 民 码 为 ; 






可 见 , 网络 训练 到 第 1000 步 盏 1500 几时, 网 络 误差 发 生 了 轻微 的 改变 , 从 1500 步 后 ， 
网 阁 误 冀 就 不 再 改变 ， 如 图 3-21 所 示 ， 此 时 的 网 络 训练 误差 为 0.2143 左右 ， 


本 站 本 本 生生 十 疏 二 二 站 


四 
| 
图 3-31 宫 几 课 莽 曲 圳 
对 同 络 进 行 佑 真 ， 得 到 此 时 的 加 上 输 山 Y。 


可 得 Y-09286 03571 。 -07857, 与 目标 向 量 工 相 比较 , 发 现 误差 还 是 比较 太 的 。 
这 说 明 在 这 种 情况 下 ， 网 妾 是 无 法 获 出 完美 的 解决 方案 的 。 

例 3.5 给 定 如 下 的 输入 向 量 P 和 输出 向 量 T, 再 次 利用 线性 网 络 求解 两 者 之 问 的 甘 系 。 
村 例 的 目的 在 于 了 和 解 钱 性 网 络 的 线性 通 近 求解 的 能 力 ， 


此 时 , 问 顾 相当 于 用 4 个 方程 是 ww 和 也 两 个 未 知 数 ， 由 于 方程 数目 赤 于 未 知 数 的 数目 ， 
所 以 直接 解 方程 是 无 解 的 ， 但 仍 可 利用 名 性 网 络 解 丐 这 个 问题 。 从 两 个 向 量 的 结构 可 以 看 
出 ， 些 时， 网络 的 大 构 为 下 个 输 关 神经 元 和 1 个 输出 神 到 元 ，1 个 权 值 训 和 1 个 间 慎 b。 
首先 将 和 了 妈 制 在 一 起 ， 懂 权 为 : 





绘制 结果 如 图 3.22 所 示 。 接 下 来 创建 一 个 线性 网 络 ， 间 进行 调 练 。 代 码 为 ， 






名 练 结果 厨 圈 323 所 示 。 
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| 让 下 
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ET ES 忆 
图 3 办 二 向 量 P 有 目标 向 量 了 
PE 28 Com 二 0 





上 
有 Fe 


| 
图 于 24 训 虹 结 果 


由 此 可 见 ， 网 络 自 第 325 寥 训 练 后 ， 吝 差 就 不 再 层 变 ， 此 时 的 MSE= 00723587， 误 莽 
还 是 比较 大 的 ， 在 雍 寺 行 秽 口 中 输 六 : 













得 到 庆 08299 12975 。 27009 -12276: 
最 后 检验 网 络 是 否 娄 好 地 逼近 了 PP 和 下 之 间 的 钱 性 鞠 系 。 代 三 为 : 


运行 站 果 如 图 3-24 所 示 。 从 图 中 可 以 看 出， 网 阁 的 逼 近 误 差 是 比较 大 的 : 因此 ， 可 以 
得 出 如 下 结论 ， 线 性 网 络 只 可 以 学 习 输入 / 畏 出 向 量 之 间 的 线性 甘 系 。 所 以 ， 对 于 某 些 特殊 
的 间 古 ， 网 络 无 法 得 到 泣 意 的 结果 。 但 是 ， 即 司 不 存在 一 个 完美 的 结果 ， 内 要 学 习 速 率 足 
鱼 小 ， 对 于 给 定 的 结构 ， 氏 性 网 络 总 可 得 到 一 个 接近 目标 的 由 果 。 


节 


上 








图 3-24 网络 逼近 曲线 


3.4 径 向 基 天 数 网 络 及 MATLAB 实现 


径 向 基 函 数 RBF 神经 网 络 〈 简 称 径 向 基 网 络 ) 是 出 JMoody 和 CDarken 于 20 世纪 80 
年 代 末 提出 的 一 种 神经 网 络 结构 ， 它 是 具有 单 隐 层 的 三 导 前 镇 网络 。 目 前 已 经 证 明 ， 径 向 
基 网 络 也 能 够 以 任意 精度 逼近 任意 连续 函数 ， 


3.4.1 ” 径 向 基 网 络 结构 


如 果 要 实现 同一 个 功能 ， 径 向 基 爽 络 的 神经 元 个 数 可 能 要 比 前 向 BP 网 络 的 神经 元 个 
数 要 多 ， 但 是 ， 径 向 基 网 络 所 需要 的 训练 时 间 却 比 前 向 BP 网 络 的 要 少 。 

径 阅 基 网 络 的 神经 元 模型 结构 如 图 3-25 所 示 。 由 图 可 多 ， 径 向 基 网 络 传递 函数 radbas 
是 以 权 什 向量 和 阁 值 铅 量 之 间 的 距离 lldistl 作 为 扫 变 晤 的 ， 其 中 ，lldistll 是 通过 输入 向 量 和 加 
权 竹 阵 的 行 向 量 的 乘积 得 到 的 。 


输 六 . 径 向 基 挤 经 元 
人 
多 
on CD 
1 
图 3-2$ 径 阅 基 神 经 元 模型 结构 
径 向 基 网 络 传递 画 煞 的 原型 函数 为 : 
radbas (mn 一 e 
当 和 输入 自 变 景 为 0 时 ， 传 递 函 数 取得 最 大 值 为 1， 随 着 权 值 和 输入 向 量 之 间 折 离 的 减 


少 ， 网 络 输出 是 递增 的 。 所 以 ， 径 向 基 神 经 元 可 以 作为 一 个 探测 器 ， 当 输入 向 量 和 加 权 向 
量 一 致 时 ， 神 经 元 输出 1。 图 3-25 中 的 户 为 闪 值 ， 用 于 调整 神经 元 的 灵 坡 度 。 
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0 





人 
利用 径 向 基 神 经 元 和 线性 神经 元 可 以 建立 广 尽 回归 (Generalized Regression ) 神 经 网 络 ， 
这 种 形式 的 网 络 经 常用 于 函数 逼近 。 广义 回归 神经 网 络 结 枸 如 图 3-26 所 示 。 该 网 络 包括 两 


层 ， 中 间 层 《 隐 会 层 ) 为 径 向 基层 ， 输 出 层 为 线性 层 . 


驻 六 答 沿 基层 特定 的 夸 性 反 


2 

了 ] 了 本 有 

答 1 Rd 吕 c1 
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1 如 








图 3-26 广 交 回 时 神 纾 网 络 结构 





图 3-26 所 示 的 广 立 回归 神经 网 络 有 避 组 输入 向 量 ， 每 组 癌 量 的 元 素 个 数 为 丸 个 ， 中 
河 层 有 8 个 径 向 基 神 经 元 ， 输 出 尽 有 全 个 线性 神经 元 。 
径 向 基 神 经 元 还 可 以 和 竞争 神经 元 一 起 共同 组 建 概率 神经 网 络 〔【Prebabilistic Neural 
Netwetk, PNN)。 概 率 圳 经 网 络 经 常用 于 解决 分 类 问题 。 网 络 结构 如 图 3-27 所 示 。 
输入 


径 问 基层 喜 争 层 





图 3-27 ” 摄 率 神经 网 络 结构 


概率 神经 网 络 按 此 方式 进行 分 类 : 为 网 络 提供 一 种 输入 模式 同 量 后 ， 首 先 ， 径 疝 基 层 
计算 该 输入 向 量 同 样本 输入 向 痢 之 间 的 距离 lldisil， 该 层 的 输出 为 一 个 距离 向 量 。 竞 人 争 层 接 
受 距 离 向 和 量 为 输入 向 量 ， 计 算 每 个 模式 出 现 的 概率 ， 通 过 竞争 传递 函数 为 概率 最 大 的 元 素 
对 应 输出 1， 这 就 是 一 类 模式 :否则 输出 0， 作 为 其 他 模式 。 


3.4.2 径 向 基 困 数 的 学 习 过 程 


径 向 基 上 本数 网 络 是 由 输入 层 、 隐 含 层 和 输出 层 构 成 的 三 层 前 向 网 络 《 以 单个 输出 神经 
元 为 例 )， 隐 含 层 来 用 径 向 基 函 数 作为 激励 函数 ， 该 径 癌 基 函数 一 般 为 商 斯 玫 数 ， 如 图 3-28 
所 示 。 隐 尾 每 个 神经 元 与 输入 层 相 连 的 权 值 向 量 W1 和 输入 矢量 冶 ( 表 未 第 9 个 输入 癌 量 )， 
之 间 的 距离 乘 上 阔 值 电 ; 作为 本 身 的 输入 ， 如 图 3-29 所 示 。 





图 3-28 RBF 网 络 结构 


117 


本 











as 站 
- Sr 司 . 六 发 


: 和 
TI 


由 此 可 得 隐 含 层 的 第 守 个 神经 元 的 输入 为 : 


友 ” = [De 一 xz) X 晶 ， 
和 输出 为 : 
8 =exp 人 (5 | (el -z) xz 了 al， - exp 人 -0 Hi 一 下 了 什 xp3 姓 


下 


Th 


对 间 上 人 “一 人 
避 ， 
1 
OA 


图 3-29 RBF 网 络 隐 含 层 神经 元 的 输入 与 输出 


径 向 基 函 数 的 几 值 51 可 以 调节 函数 的 灵敏 度 ， 但 实际 工作 中 更 常用 另 一 参数 C( 称 为 
扩展 常数 )。51 和 立 的 关系 青 多 种 确定 方法 ， 在 MATLAB 神经 网 络 工具 箱 中 ，8l 和 的 
关系 为 站 :=0. 8326/ 已 ， 此 里 隐 合 层 神经 元 的 输出 变 为 : 


了 (fwL- 妆 ) x0.8326 
9 一 忆 X 人 一 expD| -0.83262 x 一 全 
如 P C 了 | 一 C 





1 


由 此 可 见 ，C 值 的 大 小 实际 上 到 映 了 输出 对 输入 的 啊 应 宽度 。C 值 越 大 ， 隐 含 层 神经 
元 对 输入 矢量 的 响应 范围 将 越 大 ， 且 神经 元 间 的 平滑 度 也 较 好 。 

输出 层 的 输入 为 各 隐 含 层 神经 元 输出 的 加 权 求 和 。 由 于 激励 函数 为 纯 线 性 函数 ， 因 此 
输出 为 : 


3y2 一 3》 天 XW2 
二 
RBF 网 络 的 训练 过 程 分 为 两 步 ， 第 一 步 为 无 教师 式 学 习 ， 确 定 训练 输入 层 与 隐 含 层 间 
的 极 值 w1; 第 一 步 为 有 教师 式 学 习 ， 确 定 训 练 隐 含 层 与 输出 层 间 的 权 值 wz2。 在 训练 以 前 ， 
需要 提供 输入 矢量 、 对 应 的 目标 矢量 7 与 径 向 基 函 数 的 扩展 常数 C。 训 练 的 目的 是 求 取 
两 层 的 最 终 权 值 w1、w2 和 效 值 工 、 刀 “〔 当 隆 含 层 单元 数 等 于 输入 矢量 数 时 ， 取 刀 =0)。 
在 RBF 网 络 训练 中 ， 隐 含 层 神 经 元 数量 的 确定 是 一 个 关键 问题 ， 传 统 的 做 法 是 使 其 与 
输入 向 量 的 元 素 相 等 。 显 然 ， 在 输入 矢量 很 多 时 ， 过 多 的 隐 含 层 单元 数 是 难以 让 人 接受 的 。 
为 此 ， 我 们 提出 了 改进 方法 ， 基 本 原理 是 从 0 个 神经 元 开始 训练 ， 通 过 检查 输出 误差 使 网 
络 自动 增加 神经 元 。 每 次 循环 使 用 ， 使 网 络 产生 的 最 大 误差 所 对 应 的 输入 向 量 作为 权 值 向 
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EM 
量 ww， 产生 一 个 新 的 苞 洛 屋 神 如 元 ， 化 后 习 查 新 疗 妆 的 误 苦 ,重复 此 过 程 直 到 达到 误 芭 要 
求 成 最 天 陷 坷 层 圳 公元 数 为 止 。 由 此 可 见 ， 到 向 基 函 数 网 绍 具 有 时 构 自 适度 确定 ， 输 也 与 
官 冶 权 值 无 甘 生 特点 。 


343 RBF 网 络 应 用 实例 


这 里 利用 民 BF 网 冲 关 构 自 适应 确定 . 输出 与 初 凰 权 值 无 甘 等 优良 特性 ， 特 该 网 络 应 用 
于 某 地 的 地 下 求 动态 慑 拟 与 预测 ， 科 示 蔬 练 样本 集 与 检测 样 志 剑 的 构建 ， 原 始 数据 的 预 处 
天 。 和 赴 缀 网 络 的 构建 训 虹 和 以 副 及 结果 评剧 的 整个 过 程 。 

1. 疝 期 准备 

类 下 未 位 主要 受 宁 壕 雨量， 气温 ， 也 和 益 ， 降 水 熏 和 蔬 发 量 等 重 要 因 了 于 影响， 由 此 从 
疆 糙 申 四 大 阳 记 明 数据， 如 囊 3 所 示 ;， 选 定 其 中 的 1 一 弛 组 作为 训练 梓 本 ， 加 一双 组 作 
为 副 试 桩 本 。 
所 监测 骨 据 囊 





Ri 






人 了 
巩 各 有 美好 下 水 位 的 喜气 后， 在 用 于 训 詹 料 示 机 测试 样本 之 前 ,需要 进行 
归 一 化 处 理 。 未 3-4 中 的 康 所 为 已 经 昌 一 化 处 理 的 数据 

2. 网 党 的 创建 ， 训 绒 和 测试 

RBF 网 阁 的 输 六 层 神 经 元 个 数 上 取决 于 地 下 求 位 影响 因子 的 个 数 ， 由 表 了 4 可 和 所， 其 个 
数 为 5。 由 于 输出 划 是 地 下 水 位 的 值 ， 所 以 输出 层 神 经 元 个 数 为 1。 利用 函数 newrbe 创建 
一 在 情 醒 的 神经 网 终 ， 该 函数 在 创建 RBF 网 络 时 ， 自 动 选择 风 音 屋 的 数目 ， 使 得 误 茧 为 由 
由 和 码 汶 ， 


其 中 ，P 为 输 太 向 量 , T 为 目标 向 量 . 它们 可 从 考 34 中 得 到 。SEPREAD 为 径 疝 基 函 数 
的 熙 布 密度 ，SPREAD 越 太 ， 函 数 越 平 将 ， 这 里 先 取 1.5。 由 于 同 络 的 建立 过 程 就 是 训练 过 
程 ， 国 此 ， 此 叶 得 到 的 同 岂 net 已 既是 贡 练 好 了 的 。 

接 下 来 对 网 络 进行 仿真 ， 验 证 其 预 铀 性 能 。 代 三 为 ; 







其 中 ，P_Esa 为 网络 的 测试 样本 ， 从 表 3.4 中 得 出 运行 结果 为 ， 





既 过 反 归 一 化 处 理 ， 可 得 地 平水 位 三 6.8581 7 了.8632 和 2535 末 3947 5.8007。 
同 实际 慎 有 ee6.777.675.335.82 558 相 比 较 , 可 得 出 预 抽 误 差 如 图 了 所 示 " 由 图 可 见 ， 
对 于 地 下 未 习 的 预报 率 蔽 ， 网 端的 预报 误差 并 平 太 ， 


图 针 班 网络 的 预 铀 误 


此 外 ，SPREAD 值 的 大 小 影响 网 络 的 预测 精 座 。 接 下 来 ， 分 别 在 SPREAD=2.3.4.5 的 
情况 下 计算 网 络 的 预报 精度 。 代 码 为 ， 





位 和 
| 








结果 妇 图 3-31 所 和 未。 可 以 看 出 ， 当 8PREAD=2 或 了 3 时， 网 络 的 预报 误 莹 最 小 ， 装 此 ， 
本 例 中 SPREAD=2 或 3 格 可 得 到 理想 的 结果。 图 中 “*” 号 表示 的 为 采用 了 PE 同 络 进行 地 下 
永 习 预报 的 误差。 

汐 了 验证 RBF 同名 相 对 于 BE 网 络 的 优势 ， 在 本 例 中 利用 BP 网 络 对 地 下 水 位 进行 重 
新 预报 。 选 择 的 BF 交 络 鸭 3 总计 区 1 的 关 构 ， 训 练 函 数 性 ainim。 皮 过 5 次 训 蝶 后 ， 对 
网 阁 进 行 迟 真 ， 间 计算 网 效 的 预 调 误 董 。 襄 着 变量 用 /_ bp 表示。 上 音 对 比 后 监 现 ， 对 于 预 
报请 度 来 次 ，BP 网 络 明理 和 如 RBF 网 妆 ， 而 且 BE 辣 些 的 训 氏 时 间 明 显 术 于 RBF 网 络 ， 
其 训练 速度 比较 慢 。 


和 省 广 


1 证 可 可 主 5 各 民生 二 击 旧 外 


阅 二 341 SPREAD 取 不 同 值 时 的 预报 谢 郑 
344 基于 RBE 网 络 的 非 线性 这 波 


1. 非 线 性 着 波 

早 摘 的 数字 信和 号 处 理 和 数字 图 像 处 理 主要 以 拳 性 恋 波 器 为 主要 处 理 手段 ， 线 性 让 疲 器 
由 于 数学 妻 达 趟 比较 简单 并 且 具 有 其 他 一 些 比 较 理 想 的 特性 ， 所 以 ， 实 现 起 来 相对 比较 窜 
易 。 然 而 ， 当 信号 中 存在 由 系统 非 上 线 性 引起 的 唱 声 或 非 商 斯 春 加 型 哈 声 时 ， 性 滤波 器 便 
不 能 报 好 地 工作 。 目 前 ， 最 优 非 线性 宕 起 存在 “实时 ”问题 ， 即 ,11 扰 波 器 权 系 监 的 实 
时 计算 ， (21 非 线 性 恋 波 器 的 实时 实现 。 描 述 系 统 的 非 线性 差分 方 移 为 


状态 方程 。 fa 十 夫 = 太 (z(m])+ Wi 


观测 方 租 ，y fm+ 菇 = 有 (x+mfa)。 


1 


JE 证 瑟 同系 硬 ESMATLAB 7xwi- 

其 中 ,和 上 者 是非 半 性 函数 ，wfmJ 和 Wi 为 堆 均 值 的 白喉 声 序列 。 

所 谓 最 优 夸 省 ， 就 是 解决 从 观 铀 值 Wam 个 计 出 状态 (aj， 且 使 得 则 (mn) 可 以 最 好 地 接近 
ini RBFE 网 络 具 有 惟一 的 最 佳 十 近 特 性 ， 因 此 喧 试 将 其 应 用 于 最 优 赋 滤 ， 即 利用 已 知 的 
有 洒 樟 燥 据 对 非 线 性 函数 做 最 佳 逼 过。 由 RBF 网 络 的 畏 六 / 轴 出 表达 式 可 得 帮 的 估计 值 : 

i= 袜 wRfJ=wrr() 

其 中 ， 更 =[W 记 ， 7=[ 丽 人 |] ， 玉 为 训 绒 次 数 。 接 下 来 ， 设 计 一 个 RBF 网 络 ， 使 得 

它 可 以 硒 规 定 的 精 诬 肉 通过/ 


2 网 络 设计 
输入 样本 为 P， 目 标 向 量 为 T， 节 下 所 示 ; 






在 上 面 的 代 三 中 ， 我 们 利用 RBF 网 络 精确 创建 函数 mewrhbe， 创 建 了 一 个 准确 的 RBF 
网 络 ， 它 已 经 可 以 通 近 目 标 向 量 了 。 由 于 径 向 基 函 数 的 分 布 密度 SPREAD 可 以 影响 同 络 的 
精度 ， 因 此 ， 这 里 尾 其 设 定 为 1.2.34 和 5， 共 纯 个 下 数 ， 观 察 它 们 对 网 络 预测 性 人 能 的 影响 。 

同 妆 的 通 近 误差 嫩 图 于 好 所 示 ， 直 图 可 见 ， 苍 布 宣 度 为 1 和 了 工时， 网 阁 的 通 返 襄 芝 出 
较 沙 ， 考 谍 到 才 歼 速度 和 计算 方面 的 原因 ， 这 里 的 分 布 密度 选 1。 

此 时 竟 络 的 输出 铺 果 为 










本 实例 的 完整 MATLAB 代码 为 ， 
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图 3-32 网 络 的 通 近 误 雍 曲 钱 
3.45 基于 GRNN 的 函数 通 近 


广 久 回 归 神 皮 网 绍 GRNN 是 径 向 基 赣 络 的 一 种 变化 形式 ， 由 于 训练 速度 恢 ， 非 线性 映 
躺 能 力 很 强 ， 因 此 官 经 常用 于 函数 盈 近 。 

接 下 率 设 计 一 个 简单 的 GRNN 网 络 ， 用 于 对 非 线性 函数 的 通 近 。 

1 问题 站 述 

这 里 要 通过 的 函 炸 为 指 豆 画 烙 y=expf-o【 =- 1srel1)， 综 制 该 函数 的 曲线 ， 如 图 3-33 
所 示 。 





- 夯 三 和 本 画 而 
汪 和 宇 亲生 WiESNMATLAB27xwui 
na 


是 
生 


疙 3 瑟 指 束 函数 


2 网 络 创 是 与 训 绒 

径 向 基 画 过 的 分 布 窗 诬 SPREAD 可 以 对 GRNMN 的 性 能 产生 重要 影响 ， 理论 上 讲 ， 
SPREAD 趟 小 ， 对 冰 琢 的 逼近 就 赵 情 确 ， 但 是 逼近 的 过 程 就 越 不 平滑 ，SPREAD 越 太 ， 通 
近 过 程 就 比较 平 靖 ， 但 是 逼近 误 竹 况 比 较 支 。 

由 于 SPREAD 的 去 小 对 同 妆 的 最 此 逼近 精度 有 汀 比较 太 的 影响 , 国 此 在 网 络 设 计 过 程 
让 需要 调 到 SPREAD 的 值 ， 直 到 达到 比较 理想 的 精 庶 ， 

接 下 来 将 SPREAD 分 别 设置 为 0.1.02.0.304 和 总 5, 杭 验 赴 同 的 SPREAD 值 对 网 络 通 
近 性 能 的 影响 ， 









此 时 间 阁 的 输出 与 对 函数 的 台 近 效果 如 图 3- 孙 所 示 。 册 图 可 见 ， 当 SPREAD=0.1 时 ， 
网 络 对 函 避 的 通 近 喜 果 量 好 ， 当 SPREAD=05 时 ， 网 络 的 盟 近 效果 量 北 。 这 也 验证 了 上 面 
的 结论 。 


机 


型 3- 引 网 络 的 前 近 结果 


困 此 ， 可 特 SPREAD 的 最 佳 值 设 定 为 01， 此 时 赐 昭 对 函数 的 通 近 误差 加 图 于 茹 所 志 。 
由 图 可 见 ， 网 络 的 通 近 误 答 一 直 在 0 的 附近 波动 ， 这 说 明 网 冶 对 函数 的 吉 近 效果 是 非常 好 的 : 
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图 3.35 ”网络 的 通 近 误差 
本 例 的 完整 MATLAB 代码 为 ; 


重重 





下 





3.4.5 ”基于 慨 率 神经 网 络 的 分 类 


概率 神 皮 网 络 ENN 也 是 径 向 基 网 络 的 一 种 变化 形式 , 它 具 有 半 构 简单 .训练 快 钝 等 特 
点 ， 应 用 非常 广泛 ， 特 别 适 音 于 伐 式 外 类 问 题 的 解 焉 。 在 模式 分 迷 趾 ， 它 的 优 堆 在 于 可 以 
利用 具 性 学 习 算 法 来 完成 以 性 非 线 性 算法 所 做 的 工作 ， 同 果 允 可 以 保持 非 线 性 算法 高 精度 
的 特性 。 
来 节 筷 一 十 非常 简单 的 岗子 说 明 EN 在 营 类 问题 中 的 庶 用 。 
1. 问题 措 述 
盆 定 输 六 为 一 个 一 他 向 量 ， 一 共有 了 个 元 昌 : 
本 三 (了 本 本 于 丰 了] 
谅 南 量 昌 这 些 元 闽 所 属 的 类 别 为 : 
中 233 FE 
利用 函 整 plotvec 给 制 出 这 些 元 素 的 美 别 : 
ET 一 一 一 s 一 一 
结果 如 图 3- 荐 所 示 。 





转 计 站 四 到 向量 结果 
plotvec 可 以 根据 第 2 个 参数 的 情况 ， 利 用 十 同 上 色 刍 制 出 第 1 车 枚 散 中 相应 的 元 束 ， 
读者 可 以 在 WMATLAB 市 专 行 窗口 中 输 六 以 上 代码 ， 业 后 观察 晴 果 。 
2. 网 络 创建 与 训 峙 
同 RBF 网 络 一 样 ， 径 向 基 函 数 的 分 布 密度 SPREAD 能 够 对 网 络 的 分 闫 性 能 产生 比较 
严重 的 屎 哆 , 当 呈 EREAD 接 这 于 问 时 ， 对 应 的 四 NMN 就 成 省 一 个 最 全 域 分 营 国 ;， 当 SPREEAD 
增 去 后 ， 对 应 的 百 qN 就 要 考虑 附近 的 设计 向 量 : 
SPREAD ne 创建 一 个 PNN， 





SPREADes0.1 ES 的 默认 值 ， 因此 ， 这 里 无 需 特别 设 定 。 函数 让 dvec 特 类 
别 向量 园 换 为 BNN 可 以 使 用 的 目标 向 量 T:， 函数 Wecaind 将 分 业 结 果 转 换 为 容易 识别 的 烛 
别 阿 量 。 

网 阁 的 输出 阁 时 为 ， 





可 见 网 络 对 输入 向 量 进行 了 正确 分 类 。 
本 例 完整 的 MATLAB 由 本 为 





3.5 _GMDH 网 络 及 MATLAB 实现 


GMDH 的 全 称 是 Group Wethod of Dala Handling【 数 据 处 理 的 群 方 苇 1)，GMDH 网 络 也 
称 为 志 项 式 同 络 ， 它 是 曾 饮 神 既 网 络 中 常用 的 一 种 用 于 预 届 的 神 径 网 络 。 它 的 畦 点 是 网 阁 
兰 桔 平 国定 ， 而 是 在 训 夕 过程 审 平 断 地 改变 。 
351 3GMDH 网 络 理论 


GMDH 同 络 的 时 构 在 调 虹 过程 中 是 变化 的 ， 如 图 3-37 所 示 的 是 训练 后 的 一 个 比较 典 
型 的 GMDH 网络 
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图 3.37 _GMDH 网 络 结 拘 


该 网 络 有 4 个 输入 和 1 个 输出 。GMDH 网 络 的 输入 层 将 输入 信号 前 向 传递 到 中 间 层 ， 
中 间 层 的 每 个 神经 元 和 前 一 层 的 2 个 神经 元 对 应 ， 因 此 ， 输 出 层 的 前 一 屋 《 中 间 野 ) 肯定 
只 有 2 个 神经 元。 

一 般 采 用 自 适 应 线性 元 件 作为 GMDH 网 络 中 的 神经 元 ， 如 图 3-38 所 示 。 访 神经 元 的 
输入 输出 关系 为 : 


.一 立 了 
2 加 5 十 HCL 十 HS 十 Ci 十 网 必 十 245 


其 中 ，Z ,表示 第 天 层 的 第 ! 个 处 理 单元 ， 且 zu 一 郊 ， 册 (i=12,3,4,5) 为 神经 元 的 


权 值 。 由 上 式 可 见 ，GMDH 网 络 中 的 处 理 单元 的 输出 是 2 个 输入 量 的 二 次 多 项 式 ， 因 此 网 
络 的 每 一 层 将 使 得 多 项 式 的 次 数 增 大 2 阶 , 其 结果 是 网 络 的 输出 可 以 表示 成 输入 的 商 阶 (2 
阶 ) 多项式 ， 其 中 大 是 网 络 的 晨 数 《不 含 输入 层 )。 

区 


故 一 


2 


2 了 


图 3-38 GMDH 网 络 中 的 神经 元 《输入 屋 神 经 元 除外 ) 


3.52 _GMDH 网 络 的 训练 


证 练 一 个 GMDH 网 络 ， 包 括 从 输入 层 开始 构造 网 络 ， 调 整 每 一 个 神经 元 的 权 值 和 增 
加 网 络 层 数 直 到 满足 映射 精度 为 止 。 第 一 层 的 神经 元 数 取决 于 输入 信号 的 数量 ， 每 一 个 输 
入 信号 需要 一 个 神经 元 。 一 般 地 ， 假 定 网 络 仅 有 一 个 输入 ， 所 以 输入 层 只 有 一 个 神经 元 。 
假设 在 时 刻 天 神经 元 的 权 向 硬 为 : 


T 
Wi=[wowbvwaywaywlsyw5] 


输入 向 县 为 : 


工 
0 
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其 中 ， Ja 为 神经 元 在 大 时 刻 的 目标 输出 向 量 ，C 为 学 习 速 率 ， 取 得 在 [0.L 之 癌 。 


T _ T T 
We 二 Te 十 站 (Us 一 】 


按照 上 式 就 可 以 调整 神经 元 权 值 ， 降 低 神经 元 实 陈 输 出 和 目标 输出 之 问 的 误差 。 

以 上 计算 是 存 假 定 只 有 输入 的 前 提 下 进行 的 。 从 权 值 调整 公式 可 以 看 出 ， 网 络 期 望 输 
出 得 ym 出 现在 每 个 输入 层 神经 元 中 ， 并 希望 通过 训练 使 各 神经 元 都 能 达到 这 一 期 望 输出 。 
对 一 个 神经 元 来 说 ， 当 训练 数据 集中 每 一 个 数据 产生 的 拘 方 差 之 和 5 达到 最 小 时 ， 对 这 个 
神经 元 的 训练 就 结束 ， 其 权 值 子 以 男 定 。 当 输入 层 的 神经 元 被 全 部 训练 一 遍 后 ， 训 练 停止。 
这 时 ， 另 一 组 数据 〔〈 通 常 称 为 选择 数据 ) 被 加 到 神经 元 上 ， 并 计算 相应 的 加 。 对 那些 算 
小 于 阔 值 的 神经 元 ， 即 长 入 下 一 层 ， 而 其 余 神 经 元 则 被 会 奔 ， 同 时 记录 每 一 屋 神 经 元 训练 
过 程 中 产 牛 的 最 小 Ss。 若 当前 层 在 训练 过 程 中 产生 的 最 小 吕 小 于 前 一 层 时 《 它 表 示 网 络 精 
度 得 到 提高 ),， 就 产生 一 个 新 的 神经 元 层 ， 这 一 层 中 的 神经 元 数 取决 于 上 一 层 中 保留 的 神经 
元 数 ， 然 后 对 新 的 神经 元 层 进 行 训练 选 择 ， 而 保持 已 训练 的 神经 元 层 不 变 ， 这 一 过 程 一 
直 进 行 到 Sr 不 再 减 小 为 止 ， 这 时 ， 取 前 一 层 神 经 元 中 误差 最 小 的 神经 元 的 输出 作为 阿 络 输 
出 。 当 新 神经 元 层 只 有 虐 个 神经 元 ， 且 该 层 的 8 小 于 前 一 层 时 ， 这 一 神经 元 就 作为 输出 神 
经 元 。 输 出 神经 元 确定 以 后 ， 要 对 网 络 进行 整理 ， 所 有 与 得 出 神经 元 无 直接 或 间接 联系 的 
神经 元 都 被 售 弃 , 仅 留 下 那些 与 输出 有 关 的 神经 元 。 图 3-37 即 是 一 个 训练 结束 后 的 GMDH 
网 络 . 


在 输入 层 中 ， 输 入 为 所 ,区 的 神经 元 已 被 会 去 ， 而 在 第 2 层 中 ， 有 了 个 
贷 r 神经 元 被 舍弃 ， 












































3.5.3 基于 GMDH 网 络 的 预测 


一 般 来 说 ， 所 有 的 神经 网 络 均 可 用 于 预测 。 但 是 ， 对 于 一 般 的 前 馈 网 络 来 说 ， 其 结构 
《神经 元 层 数 及 每 层 神经 元 个 数 ) 部 是 辐 定 的 ， 在 训练 过 程 中 不 会 发 生 任何 变化 ， 因 此 一 
个 网 络 的 性 能 好 坏 与 事前 确定 的 该 网 络 结构 是 否 合 适 有 很 大 关系 。 

与 此 不 同 的 是 ，GMDH 网 络 的 结构 是 在 训练 中 动态 确定 的 。 在 训练 过 程 中 ， 网 络 的 神 
经 元 层 数 不 断 增 加 ， 每 增加 一 层 就 增加 一 些 新 的 神经 元 ， 而 那些 人 性 能 不 好 的 神经 元 则 被 售 
弃 ， 因 而 每 一 层 中 的 神经 元 数 也 是 可 变 的 。 

王 面 是 训练 一 个 用 于 预测 的 GMDH 网 络 的 步 又， 

C1) 数据 预 处 理 。 包 括 数据 规范 化 和 除去 数据 中 的 静止 直流 成 分 。 习 惯 上 ， 对 于 已 有 
的 输入 输出 样本 ， 在 进行 神经 网 络 的 训练 以 前 ， 首 先进 行 归 一 化 处 理 。 

(2) 决定 网 络 的 输入 信号 数 。 对 于 预测 ， 需 要 用 到 亚 个 过 去 输出 值 。 如 果 需 要 , ”的 
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值 可 以 通过 计算 相关 系数 确定 。 

(3) 将 实验 数据 分 成 训练 样本 和 测试 样本 ， 

(4 建立 输入 神经 元 层 。 神 经 元 数 与 划 入 信和 号 数 二 有关 。 对 每 个 输入 信号 ， 都 有 一 个 
神经 元 与 立 对 应 。 因 此 ， 相 应 的 神经 元 邓 为 C;。 

5) 将 神经 元 权 值 的 声 始 值 设 为 0。 

(6) 将 训练 数据 组 作用 于 输入 层 的 每 一 个 神经 元 。 在 大 时 刻 了 到 和 il (CK = 12…-) 作为 
输入 信号 ， 闪 为 期 望 输出 ， 计 算 每 一 神经 元 的 输出 误差 ， 并 修正 其 权 值 和 均 方 误 莽 和 ， 当 
均 方 差 和 大 于 上 一 循环 计算 值 时 ， 训 练 停止。 

(7) 输入 选择 数据 ， 计 算 每 一 神经 元 的 输出 均 方 差 。 根 据 差 值 确 定 一 个 交 值 ， 选 抒 方 
差 小 于 国 值 的 神经 元 作为 下 一 层 神经 元 。 

(8) 当 本 层 最 小 均 方 差 大 于 前 一 层 神经 元 的 最 小 均 方 差 或 本 层 仅 有 一 个 神经 元 时 ， 停 
止 训 练 过 程 。 如 果 训 练 是 由 于 最 小 方差 偏 大 而 停止 的 ， 册 将 前 一 层 神经 元 作为 输出 层 ， 并 
重新 整理 网 络 ; 车 训练 是 因 本 层 仅 有 一 个 神经 元 而 停止 的 ， 且 本 次 方差 小 于 前 一 层 时 ， 则 
以 本 娠 神经 元 作为 输出 层 并 重新 整理 网 络 。 所 谓 重 新 整理 就 是 指 舍弃 那些 与 输出 神经 元 设 
有 联系 的 神经 元 。 

(93 利用 评价 数据 组 检查 训练 好 的 网 络 性 能 。 评 价 数据 组 可 以 是 上 述 样本 数据 和 测试 
数据 的 结 台 ， 也 可 以 是 一 组 全 新 的 数据 。 采 用 全 新 数据 组 可 以 在 更 广泛 的 基础 上 检查 隔 络 
性 能 ， 

神经 网 络 工具 箱 没 有 为 GMDH 网 络 提 供 有 关 的 范 数 工 具 ， 因 此 ， 只 有 通过 MATILAB 
的 数学 计算 功能 来 实现 以 上 的 算法 ， 在 此 就 不 再 团 述 了 。 





3.6 小 “” 缂 


本 章 主 要 介绍 了 有 关 前 向 型 网 络 的 工具 箱 函数 。 前 向 型 网 络 包 括 感知 器 、BP 网 络 、 线 
性 网 络 、 径 向 基 网 络 和 GMDH 网 络 ， 它 们 被 广泛 地 应 用 于 函数 逼近 、 模 式 分 类 和 预测 等 领 
域 ， 取 得 了 不 错 的 应 用 效果 ，BP 网 络 是 其 中 的 典型 代表 。 在 利用 前 向 型 网 络 解决 实际 问题 
的 过 程 中 ， 需 要 注意 以 下 几 个 问题 : 

(1)》 根据 实际 问题 选择 合适 的 网 络 形式 ， 虽 然 BP 网 络 的 应 用 空间 比较 大 ， 但 是 在 一 
些 家 际 问题 中 ， 它 的 精度 可 能 不 及 径 向 基 网 络 。 而 感知 器 网 络 和 线性 网 络 只 能 对 线性 可 分 
的 模式 进 分 类 。GMDH 网 络 在 预测 方面 有 着 不 错 的 应 用 效果 , 但 是 它 的 训练 过 程 比 较 复杂 ， 
而 且 没 有 对 应 的 神经 网 络 工具 箱 函数 ， 限 制 了 它 的 应 用 。 

(2) 三 层 的 BP 网 络 可 以 逼近 任意 的 非 线性 有 映射， 因此， 在 实际 应 用 中 ， 如 无 必 机， 
-一般 采用 三 请 的 BP 网 络 就 足够 了 。BP 网 络 输入 层 和 输出 层 的 神经 元 个 数 是 根据 实际 的 输 
入 /输出 向 量 确定 的 ， 而 隐 层 神经 元 数目 的 确定 一 直 没 有 通用 的 方法 ， 一 般 是 首先 根据 工程 
经 验 确 定 一 个 大 臻 的 范围 ， 然 后 通过 不 断 实 验 来 选 定 。 

3》 网络 结构 确定 后 ， 还 需要 选择 合理 的 训练 范 数 对 网 络 进行 训练 。 为 了 避免 在 训练 
过 程 中 陷入 “局 部 极 小 ”% 一 般 应 采用 变速 率 或 自 适 应 速率 的 训练 函数 。 

下 一 章 将 介绍 皮 馈 型 神经 网 络 理论 及 MATLAB 实现 。 
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第 4 章 反馈 型 神经 网 络 理论 及 
MATLAB 实现 


反馈 型 神经 网 络 又 称 为 递归 网 络 或 回归 网 络 ， 它 是 一 种 反馈 动力 学 系统 ， 比 前 向 神经 
网 络 具 有 更 强 的 计算 能 力 。 在 此 类 网 络 中 ， 稳 定性 与 其 联想 记忆 的 能 力 密 切 相 关 ， 因 此 ， 
稳定 性 是 一 个 重 要 的 研究 方向 。 而 在 前 向 神经 网 络 中 ， 注 重 学 习 方 面 的 研究 而 较 少 关心 稳 
定性 ， 例 如 BP 网 络 就 是 这 样 的 。 反 馈 神 经 网 络 注重 全 局 稳定 性 方面 的 研究 ， 如 Hopfield 
网 络 在 很 大 程度 上 提高 了 网 络 的 稳定 性 。 

本 章 所 括 闷 下 内 容 : 

和 Eliman 神经 网 络 及 MATLAB 实现 
Hopfield 神经 网 络 及 MATLAB 实现 
CG 网 络 模型 及 MATLAB 实现 
盒 中 脑 (BSB ) 模型 及 MATLAB 实现 
双向 联想 记忆 【BAM) 及 MATLAB 实现 
回归 BP 网 络 及 应 用 
Boltzmann 机 网 络 及 仿真 


4.1 Elman 神经 网 络 及 应 用 


Elnan 神经 网 络 是 Eliman 于 1990 年 提出 的 , 该 模型 在 前 钙 网 络 的 隐 售 层 中 增加 一 个 承 
接 层 ， 作 为 一 步 延 时 算 子 ， 达 到 记忆 的 目的 ， 从 而 使 系统 具有 适应 时 变 特性 的 能 力 ， 能 直 
接 反映 动态 过 程 系统 的 特性 。 


4.1.1 Elman 神经 网 络 结构 








Elman 型 回归 神经 元 网 络 一 般 分 为 4 层 : 输入 层 、 中 间 层 ( 隐 含 层 )、 承 接 层 和 输出 层 ， 
如 图 41 所 示 。 其 输入 层 、 隐 含 层 和 输出 层 的 连接 类 似 于 前 馈 网 络 ， 和 输入 层 的 单元 仅 起 信 
号 传输 作用 ， 输 出 层 单 元 起 线性 加 权 作 用 。 隐 含 层 单元 的 传递 函数 可 采用 线性 或 非 线性 困 
数 ， 承 接 层 又 称 为 上 下 文 层 或 状态 层 ， 它 用 来 记忆 隐 含 层 单元 前 一 时 刻 的 输出 值 ， 可 以 认 
为 是 一 个 一 步 延 时 算 子 。 

Elman 型 回归 神经 元 网 络 的 特点 是 隐 含 层 的 输出 通过 承接 层 的 延迟 与 存储 ， 自 联 到 隐 
会 层 的 输入 ， 这 种 自 联 方式 使 其 对 历史 状态 的 数据 具有 敏感 性 ， 内 部 反馈 网 络 的 加 入 增加 
了 网 络 本 身 处 理 动态 信息 的 能 力 ， 从 而 达到 了 动态 建 模 的 目的 。 























HK 


图 4-1 Biman 神经 网 络 的 模型 


4.1.2 Elman 神经 网 络 的 学 习 过 程 


以 图 4-1 为 例 ，Blman 网 络 的 非 线性 状态 空间 表达 式 为 
(FJ=8Cwx()) 
xf(K) = Fw (+ 人 (-JD)) 
大 《天 =X( 天 一 贡 


其 中 ， 光 关于 所 分 别 表示 天 锥 输出 结 点 向 量 ，P 维 中 间 层 结 点 单元 向 量 ，7 维 输入 辣 
最 和 维 反馈 状态 向 量 。w” ,mw W 分 列表 示 中 间 层 到 输出 层 、 输 入 层 到 中 间 层 、 承 接 层 


到 中 间 层 的 连接 权 值 。& {.) 为 输出 神经 元 的 传递 函数 ， 是 中 间 层 输出 的 线性 组 合 。 矿 (.) 为 


中 疝 层 神经 元 的 传递 函数 ， 常 采用 $ 函数 。 
Elman 网 络 也 采用 BP 算法 进行 权 值 修正 ， 学 习 指 标 函 数 采 用 误差 平方 和 函数 ， 


E(w)=[y (wj)- 浆 (o 
其 中 京 (wy) 为 目标 输出 向 量 。 
4.1.3 ElIman 神经 网 络 的 工程 应 用 


1. 工程 概述 
在 信号 处 理 领 域 ， 幅 值 检 波 问 题 实 质 上 就 是 利用 空间 模式 来 对 时 间 模 式 进 行 识 别 与 分 
离 。 基 于 神经 网 络 进 行 幅 值 检 波 需要 一 个 连续 时 间 的 疲 形 作为 网 络 输 入 ， 网 络 的 输出 是 信 
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工 世 man 网 络 的 设计 
下 面 的 代码 定义 了 两 个 正弦 滤 信 号 pl 和 了 作为 Blman 网 络 的 输入 ,其 中 pl 的 幅 值 为 
，p2 的 幅 值 为 2， 信 和 号 该 形 如 图 4-2 所 示 。 





以 下 的 代 本 可 以 产生 两 组 向 量 t1 和 吕 ， 分 别 为 这 两 个 波形 幅 值 ， 作 为 Elman 网络 的 目 
标 输出 向 量 。 





pl 和 辽 可 以 联 侣 起 素 建立 一 个 新 的 输入 向 量 序列 pt 和 妈 也 可 以 以 同样 的 方式 联 
音 起 素 建 立 一 个 新 的 目标 向 量 1， 这 两 个 向 量 序列 可 以 用 做 网 阁 的 训 晾 样本。 在 调 练 之 前 ， 
需 于 利用 conzscq 函数 将 矩阵 形式 的 训练 样本 转换 为 序列 的 形式 , 





疾 42 信和 号 疲 恒 册 和 了 

利用 Elman 网 络 进 行 幅 值 检 波 就 是 在 每 一 个 时 间 步 长 ， 接 受 一 个 输 六 向 量 ， 输 出 一 个 
向 量 ， 即 幅 值 。 国 此 ， 在 训练 之 前 的 初始 化 过 程 中 ， 输 人 元素 的 数目 R 与 网 络 输 出 神经 元 
的 数目 S2 设 定 为 ， 






理论 上 讲 ，Elman 网 络 中 间 层 的 神经 元 数目 是 任意 选 定 的 。 但 是 ， 随 着 问题 复杂 性 的 
不 断 提高 ， 需 要 在 中 间 层 增加 更 多 的 昼 经 元 以 使 得 网 络 的 精度 和 速度 都 非常 高 。 以 下 幅 值 
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从 波 间 题 是 比较 简单 的 ， 所 以 在 中 间 层 只 使 用 了 10 个 神经 元 。 






接 下 来 就 可 以 利用 Welini 冰 数 设计 一 个 Elmnan 神经 网 络 。 






上 面 代码 表明 ， 设计 的 Elman 网 络 输 入 向 量 位 于 区 条 [2.2] 中 ， 中 介 层 有 切 个 神经 元 ， 
心 递 函 玉 为 S 函数 tunsig， 输 出 导 有 一 个 神色 元 ， 心 递 函 烙 为 线性 函 妆 purelin。 调 谍 函 蜗 
采用 默认 值 taingdx， 该 函数 在 梯度 上 下降 BP 算法 的 基础 上 ， 在 训 昧 过程 对 学 习 速 率 进行 自 
适 虚 调 性 ， 从 而 提高 网 络 的 训 屿 芍 率 。 此 外 ， 些 方 岩 在 财权 值 更 新 时 筒 疏 考 虚 了 当前 的 杨 
座 方 向 ， 而 且 还 考虑 了 前 一 时 刻 的 梯度 方向 ， 从 而 降低 了 网 络 性 能 对 参 郊 调整 的 坡 感 性 ， 
用 效 地 抑制 了 局 部 极 小 值 的 出 现 。 性 能 函数 为 默认 的 误差 平方 和 函数 mse， 

3 网 崇 训 婚 

训练 樟 已 经 在 上 一 节 给 出 ， 趣 情 号 序列 Pseq 和 Tseq。 惠 用 函数 tmain 调用 tmaingdx 
对 网 阁 进 行 训练 ， 训 练 步 数 设 定 为 500 次 。 


训练 头 音 如 图 43 所 示 ， 网 络 经 过 300 次 训练 后 ， 网 络 的 量 小 平方 和 误差 最 小 ， 大 的 
蚤 中 OI 硬 ， 国 此 ， 在 接 下 来 的 调试 中 ， 采 用 昂 过 300 次 训 乡 的 网 络 。 
[二 


和 


由 


高 高 而， 面 四 
图 43 可 man 网 烙 的 朵 峰 由 果 


二 两 络 测 谣 与 频 用 
训 钱 好 的 网 络 需要 利用 稠 试 数 据 进行 副 试 ， 检 验 同 络 的 预 铀 性 能 是 否 硕 足 要 求 。 如 果 
满足 要 求 ， 畏 可 以 利用 它 来 解 跨 实际 问题 。 为 了 保证 测试 结果 的 有 效 性 和 崔 确 性， 测试 数 
撮 座 和 礼 避 和 免 与 训练 烙 据 四 一 致 。 
首先 ， 利 用 训练 数据 对 网 络 进行 测试 ， 看 看 但 鉴 生 什 名 情况 。 副 





试 代码 如 下 : 






测试 结果 如 图 4.4 所 示 。 由 图 可 见 ， 输 出 信号 在 目标 信 生 的 两 侧 有 小 帽 度 的 振 昔 ， 但 
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RH 


过 Mi 二 美和 掩 地 训 gid 让 上 E 


官 随 着 信号 幅 值 的 变化 而 变化 ， 可 以 只 下 要 很 少 的 桦 本 就 可 以 成 功 地 术 铀 出 信和 号 的 幅 值 。 





图 +4 抽 试 结果 


细心 的 读者 也 许 会 问 ， 团 性 网 阁 可 以 银 好 地 对 训练 样本 进行 幅 值 检 波 ， 但 这 并 不 意味 
蒂 可 以 对 调 练 样本 以 外 的 信号 也 可 以 成 功 地 进行 幅 值 检 波 。 接 下 来 就 研究 一 下 这 个 问题 ， 

以 下 代码 定 文 了 一 组 新 的 正 汞 波形 ， 并 由 此 产生 了 新 的 铀 斌 样本， 这 些 样本 和 训练 样 
本 完全 不一致 。 








“将 副 试 输入 样本 提供 络 网 络 ， 利 用 仿真 函数 sim 产生 网 络 输 出 ， 并 与 测试 目标 样本 相 
比较 ， 观 察 网 络 的 性 能 ， 代 码 如 下 所 示 ， 测 试 结果 如 图 4.5 所 示 。 


LETT 


由 图 5 可 见 ， 这 次 网 站 的 测试 结果 并 不 理想 ， 幅 值 的 检 波 边界 非常 覃 由 。 原因 有 以 
下 两 点 ， 第 一 ， 串 练 信和 号 的 幅 值 过 于 单调 ， 第 二 ， 训 练 信和 号 的 数目 本 路。 针对 这 两 个 原因 ， 
刀 果 扩充 训练 信号 的 师 值 ， 并 增加 调 练 信号 的 数目 ， 网 阁 的 性 能 就 会 得 到 很 大 程度 上 的 坦 
高 此外， 如 时 在 中 间 层 生 如 更 放 的 神经 元 ， 并 适当 延长 网 络 的 训 暴 时 间 ， 也 会 在 一 定 程 
度 上 提高 网 络 性 能 。 
_ 冤 卫 的 代码 如 下 : 


4.14 基于 Elman 网 络 的 空调 负 萌 预测 


空调 系 度 逐 时 前 荷 的 准确 预 铀 是 实现 现代 控制 的 前 提 之 一 。 但 空调 负荷 受 多 种 因 款 的 
影响 ， 与 诸多 名 响 因素 之 人 间 是 一 种 多 变量 ， 强 幅 人 对， 严重 非 线性 的 关系 ， 且 这 种 关系 具有 
动态 性 ， 因 而 忧 统 方 法 的 预 副 精度 不 商 。 近 年 来 ， 估 工 神经 网 络 越 来 越 引起 控制 理论 工作 
者 的 要 大 号 趣 。 由 于 神 坚 网 络 具 有 并 行 处 理 、 孔 想 记 忆 ， 分 布 式 知 识 存储 ， 背 棒 性 强 等 特 
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点 ， 龙 其 是 它 的 自 蛆 织 、 自 适应、 自学 习 功能 ， 从 而 在 复杂 非 厂 性 对 龟 的 锥 记 和 扩 制 中 得 
到 了 广 活 庶 用， 

目前 大 才 数 采用 的 是 基于 BP 算法 的 静 坊 前 情 神 公 网 络 ， 利 用 静 硒 前 慎 网 络 对 动态 系 
张 进 行 九 识 ， 实 际 上 是 特 动态 时 间 古 板 问题 变 为 静态 空间 建 模 问 题 ， 同 时 还 需 对 而 型 由 构 
进行 定 阶 ， 特 别 是 随 录 这 阶 次 的 增加 或 阶 饶 未 和 类 ， 迅 速 扩 支 的 网 阁 半 构 司 网 络 学 习 的 收费 
速度 威 慢 ， 并 造成 网 络 输入 站 点 过 雪 。 调 练 困 难 及 对 外 部 咕 声 钙 确 等 南 病 。 相 比 过 下 ， 动 
查 回 归 神 经 网 络 TRNN ) 提供 了 一 种 极 具 沫 力 的 选择 ， 它 能 絮 更 生动 ， 更 直接 地 反映 系统 
的 动态 笔 性， 代表 了 圳 痉 网 络 建 槛 ， 岸 衣 与 控制 的 发 展 方向 。Elman 回归 神 公 网 姓 是 一 种 
旧型 的 动态 樟 既 元 网 络 ， 它 是 在 BF 网 阁 基 本 姑 构 的 基 融 上 ， 通 过 看 储 内 部 懂 态 但 其 具备 
卫 射 动态 特征 的 劲 能 ， 从 而 使 系 明 具 有 适应 时 变 特 性 的 能 方 。 国 此 ， 考 虚 到 空调 系 是 具有 
动 杰 性 的 特点 ， 堂 试 采 用 Elmaan 网 阁 进行 预 各 ， 

1 样本 设计 

室 调 又 蚁 的 副 时 负荷 是 捷 时 间 顺 序 排 末 的 获 字 序 判 ， 它 们 过 间 具 有 某 种 统计 意 况 上 的 
革 大 ， 这 种 甘 系 很 难 用 确定 的 函 获 或 方程 焊 训 描述。 

甘于 掉 色 网 络 对 时 间 序 列 进行 预 出 ， 通 常 是 根据 已 有 的 样本 数据 对 网 阁 进 行 调 练 。 如 
最 希 望 用 过 去 的 户 (W 王 17 个 数据 预测 未 来 采 工 册 到 1) 站 时 刘 的 值 ， 即 进行 邮 步 预 测 ， 
可 取 上 个 相 部 的 样本 为 滑动 窗 ， 并 特 官 们 蛇 射 为 本 个 值 ， 这 时 个 值 代 表 在 该 窗 之 后 的 财 
站 时 和 剂 上 的 样 未 的 预测 值 ， 闸 表 本 1 所 示 ， 到 出 了 样本 数据 的 一 种 分 段 方法 ， 访 表 把 训 昧 
归 据 分 威 百 展 长 度 尖 【NA 的 有 一 定 重合 的 败 据 限 ， 和 屋 一 段 的 前 睛 站 数据 作 当 网络 的 输 
入， 后 好 个 数据 作 地 网络 的 输出 。 


惠 41 畔 本 数据 的 分 段 胡 法 





在 实际 的 空调 系 柳 中 ,，『 时 刻 的 负 贰 不仅 受到 站 时刻 外 历 环 境 及 内 部 国 柬 的 明 响 ， 由 于 
备 荷 殿 成 的 时 活性 ， 而 且 要 受到 1 -= 175= 卫 … 和 = 天 等 时 刻 谱 党 因 束 的 明 唤 ， 凡 有 动态 性 。 这 
里 对 室 调 负 某 的 也 报 是 以 日 为 单位 的 ， 即 利用 前 日 的 瘟 荷 惑 据 直接 预测 第 n+1 目的 1 个 
逐 时 全 和 葡 。 

一 般 来 谋 ， 东 公 室 室 调 系 旦 的 负荷 高 天 通 常 出 现在 督 开 的 马 - 坦 时 之 间 ， 出 于 入 幅 的 
诛 固 ， 这 里 只 对 圩 天 上 午 的 逐 轩 负荷 进行 预 抽 ， 即 预制 叔 玫 89 一 位 时 技 4 让 小 时 的 负荷。 
好 要 42 所 示 ， 给 出 了 从 3003 年 7 月 1 日 至 7 日 的 旺 天 上 午 的 室 调 负 莉 数据 ， 其 中 所 有 的 
数据 部 已 经 归 一 化 幅 理 过 了 ， 
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现在 利用 前 起 天 的 数据 作为 网络 的 名 夕 翌 本 ， 每 3 天 的 俩 春 作 为 输入 向 量 ， 第 4 天 的 
负荷 作为 目标 向 量 。 这 样 可 得 到 3 给 训练 样本 。 第 7 天 的 数据 作为 网 络 的 测试 样本 ， 主 要 
看 网 络 能 否 合 再 地 预测 出 当天 的 付 于 。 


复 - 对 于 空调 亢 荷 预报 泉 讨 ， 只 考虑 历 吧台 据 是 不 触 的 。 对 于 一 个 实际 的 时 间 

序列 ， 官 的 预测 性 玫 疏 取 起 于 所 更 数 握 ， 面 且 党 许多 改变 因素 的 影响 。 为 此 ， 
在 上 过 模型 的 基础 上 , 加 上 控制 变量 以 提高 畏 度 .空调 系 六 的 负荷 除 与 历史 运 
季 监 气 有 美 以 让， 还 党 到 驯 测 卓 的 气急 参数 [光度 ,湿度 ) 盈 预 测 目 的 特性 的 
彩 响 。 册 于 工作 日 和 节假日 的 员 某 不 同 ， 因 此 还 扫 考 虑 时 间 特 征 慎 . 这 里 出 于 
篇 幅 的 原因 ， 对 预报 究 型 简单 化 ， 恒 这 上 并 不 影 响 Elman 预测 动 郁 的 演示 。 


2 网 络 的 设计 与 训练 

侣 理 确 定 Etman 网 络 的 结构 是 殉 三 性 能 的 基础 ， 实 际 上 结构 的 确定 尤其 是 中 间 层 神经 
元 数目 的 确定 是 一 个 经 验 性 的 问 题 ， 未 需要 大 量 的 实验 。 由 样 夫 数据 可 知 ， 网 络 输 入 层 应 
该 有 ! 个 神经 元 ， 和 输出 层 应 该 有 4 个 神经 元 。 根据 经 验 ， 可 以 先 将 中 间 层 神经 元 的 数目 设 
起 为 13 个。 代码 如 下 ， 





以 上 借 码 创建 了 一 站 Elman 网 络 ，threshald 规定 了 网 络 输 入 元 素 的 最 太 值 和 最 小 值 : 
[13,4] 生 Nansigwpurelina1 雪 示 网 络 中 间 层 神经 元 数目 为 13， 传 道 函 数 为 tansig， 输出 屋 神经 
元 数目 为 市 忧 遂 函数 海 paielin 

” 搂 下 来 对 网 妾 进行 训练 ， 民 码 如 下 





训 结 之 前 只 巩 定 了 训练 步 数 ， 训 蝶 目标 误差 为 默认 值 0，P 为 训练 样本 中 的 输入 向 量 ， 
工 为 目标 向 量 。 结 果 如 下 






可 见 经 过 1000 次 调 练 后 ， 网 络 的 训练 误差 为 左右 。 宙 练 结果 如 图 4.6 所 示 ， 


证 了 末 二 改名 着 作 若 iD 下 
这 已 炙 是 比较 小 的 数 拓 了 ， 我 们 认为 可 以 接受 。 


十 Fair 乱 记 [DONETDGET 性 5 上 站 


可 


下 1 2 二 
所 本 Epoeg 





转 4 石 ， 训 繁 钴 幅 
钱 后 对 网 络 进行 测试 ， 看 网 络 能 否 精确 地 预 而 出 7 月 了 7 日 的 数据 ， 代 码 为 : 





可 见 ， 网 络 的 预报 误差 是 比较 小 的 , 但 是 ,10 时 的 预报 值 出 现 了 一 个 相对 较 太 的 误差， 
如 图 4.7 所 示 。 这 是 因为 训练 样本 太 小 造成 的 。 


1 旬 开 孚 上 二 
图 47 误 熏 面 量 


为 了 检验 中 间 居 神经 元 数目 对 于 网 络 预测 性 能 的 影响 ， 将 其 分 别 设 定 为 17 次 和 3 次 
后 观察 其 训练 晶 组 和 神 误差 曲线 ， 如 图 48、 图 49 和 图 4-10 所 示 。 
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图 48 ， 训 几 上 半 时 【中间 层 昼 妈 元 个 业 ) 
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?1 
二 
加 
昌 
省 下 役 到 1] ] 及 自 本 


图 站 雹 误 莹 曲 堪 


14 和 


。 
本 


的 仙 的 直人 ht 
可 策 ， 中 间 层 村 虹 元 为 17 村 时 ， 网 绍 的 预 各 误 忒 最小 ， 也 就 星 预测 性 秀 量 好 。 因 此 ， 


对 于 本 例 ， 中 间 层 神经 元 的 量 尾数 目 应 访 是 17 个 。 
本 实例 的 完整 MATLAB 代码 为， 





4.2 Hopfield 神经 网 络 及 MATLAB 实现 


Hopfield 网 络 作为 一 种 全 连接 型 的 神经 网 络 ， 曾 经 为 人 工 神经 网 络 的 发 展 进 程 开 腔 了 
新 的 研究 途径 。 它 利用 与 阶层 型 神 皮 网 络 和 不 同 的 结构 特征 和 学 习 方 法 ， 模 拟 生 物 神 经 网 络 
的 记 杞 机 理 ， 著 得 了 令 人 满意 的 站 果 。 这 一 网 络 及 学 习 算法 量 初 是 由 美国 物理 学 家 中 
Hopfieid 于 1982 年 首先 提出 的 ， 故 称 为 Hopfield 网 络 ，1985 年 Hopfietd 本 人 和 Tank 用 这 
种 网 络 模型 成 功 解决 了 优化 组 全 问题 中 的 具有 典型 意 文 的 旅行 商 问题 TSP， 在 所 有 随机 迪 
择 的 路 竹中 找到 了 十 万 分 之 一 的 量 优 路 径 ， 这 是 当时 神经 网 络 研究 工作 中 具有 突破 性 的 进 
展 。 
Hopfield 网 络 有 离散 型 和 连 昧 型 两 种 形式 ， 这 里 只 介绍 高 做 型 Hopfield 网 绍 ， 因 为 高 
秀 型 Hopficld 网 络 的 缚 构 比 较 简 单 ， 在 实际 工程 中 的 应 用 比较 广泛 。 如 无 特别 声 啊 ， 以 后 
凡 出 现 Hopfieid 间 络 ， 都 是 推敲 散 型 的 。 
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4.2.1 Hopfield 网 络 描述 


Hopfield 网 络 结构 如 图 411 所 示 ， 它 是 一 种 单 层 反馈 性 非 线 性 网 络 ， 每 一 个 结 点 的 输 


出 均 反 馈 到 其 他 结 点 的 输入 ， 整 个 网 络 都 不 存在 自 反馈 。 


JJHopfield 利用 模拟 电路 〈 电 阴 、 电 容 和 运算 放大 器 ) 实现 了 对 网 络 的 绪 点 〔 神 经 元 ) 


的 描述， 如 图 4-12 所 示 。 
假设 网 络 共有 哺 个 这 样 的 神经 元 组 成 ， 可 得 出 


其 中 ， 此 一 区 三 交 ， 了 二 只 品 ， 日 = 了 YAC， 同 =J 岂 ， 册 ; 二 晶 ， W = 且 郊 


传递 函数 广 [z) 为 S 函数 。 








图 4-12 Hopfield 神经 元 的 模拟 电路 





1 _1 1 
一 十 9 一- 
8 人 


由 此 可 见 ， 玉 ,C 的 并 联 模 拟 了 生物 神经 元 的 时 间 常 数 ， W 模拟 了 神经 元 间 的 突 触 特 
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性 即 权 值 ， 运 算 放 大 器 模拟 了 神经 元 的 非 线性 特性 ， 偏 寺 电 流 7， 相当 于 阔 值 。 
Hopfeld 网 络 是 浙 近 稳定 的 ， 随 着 时 间 的 推移 ， 网 络 状态 向 能 基 减 小 的 方向 移动 ， 稳 


定 平 衡 状 态 就 是 能 量 的 极 小 点 ， 因 此 ， 如 果 网 络 的 初始 状态 在 稳定 平衡 状态 ， 则 其 状态 不 
变 ， 否 则 ， 网 络 需要 运动 到 稳定 平衡 状态 。 


4.2.2 Hopfield 网 络 的 学 习 过 程 


网络 的 学 习 过 程 实际 上 就 是 权 值 调整 过 程 ，Hopfteld 网 络 的 学 习 上 中 的 就 是 调整 连接 权 
值 ， 以 使 得 网 络 的 稳定 平衡 状态 就 是 所 要 求 的 状态 。 
Hopfield 网 络 常 采 用 的 学 习 算法 是 Hebb 学 习 规则 ， 即 权 值 调整 规则 为 : 若 第 ;个 和 第 
个 神经 元 同时 处 于 兴 亩 状态 ， 那 么 它们 之 问 的 连接 应 该 增强 ， 权 值 增 大 。 
六 TI 产 C 且 了 人 站 


假设 要 求 网 络 要 有 忆 个 正 交 稳 态 凡 = (VD 风 )，5=12…,， 则 





若 增加 新 的 稳 态 YY 六 ， 则 


__ 严 +tTr + 
咯 = 有 网 二 人 


4.2.3 上 几 个 重要 结论 


《1) 联想 记忆 功能 。 由 于 网 络 可 以 收效 于 稳定 状态 ， 因 此 可 用 于 联想 记忆 。 考 将 稳 态 
视 为 一 个 记忆 ， 则 击 初 始 状态 向 稳 态 收 敏 的 过 程 就 是 寻找 记忆 的 过 程 ， 初 态 可 认为 是 给 定 
的 部 分 信息 ， 收 敏 过 程 可 认为 是 从 部 分 信息 找到 了 全 部 信息 ， 由 实现 了 联想 记忆 的 功能 。 
联想 记忆 的 一 个 重要 特性 是 由 噪声 输入 模式 反映 出 训练 模式 。 

(2) 优化 计算 。 若 将 稳 态 视 为 某 一 优化 问题 月 标 函数 的 极 小 点 ， 则 由 初 态 向 稳 态 收 黎 
的 过 程 就 是 优化 计算 过 程 。 

(3) 网 络 渐 近 稳定 的 前 提 是 wii 

(4》 网 络 的 应 用 。Hopfield 网 络 多 用 于 在 控制 系统 的 设计 中 求解 约束 优化 问题 ， 另 外 
在 系统 辨识 中 也 有 应 用 。 


42.4 Hopfield 网 络 的 MAILAB 开发 


本 节 利 用 MATLAB 中 的 Demos 功能 ， 演 示 如 何 利用 神经 网 络 工具 箱 创 建 一 个 两 神经 
元 的 Hopfield 网 络 。 
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En 亲鱼 于 iDSNMATLAB :75 

1. Demas 功能 的 启动 

在 页 地 行 窗口 中 刍 太 Demos 后 接 回 手 刍 ， 出 现 和 如 图 413 所 示 的 Demo 皇 芭 而 。 首 先 
在 堪 侧 的 目录 树 中 选择 Weuiaail Metwatk 一 Hpfield aerornks 一 HoGEeld wo Tedron design 节 
点 ， 巡 后 单 击 窗口 右上 角 的 Riin 由 is 由 imo 链接 。 

第 1 步 ， 单 击 民 om 由 is demo 链接 后 ， 出 现 两 神 缉 元 上 opfeIda 网 冶 Demos 的 补 始 界面 ， 
如 图 4-14 所 了 过。 可 以 看 出 ， 素 次 该 示 共 有 昌 步 ， 这 是 第 工 步 。 

第 三 步 ， 单 击 图 于 14 所 示 窗 口中 的 【Stans>]】 技 钮 ， 出 现 徊 图 末 15 所 示 的 窗口 。 幸 
窗口 中 定 久 了 网 将 的 目 球 向 量 T=[1 -1-1 1 向 量 工 的 西 列 也 是 存储 在 网 绍 中 的 目标 稳定 
点 。 北 后 ， 单 击 【Next>>] 技 钮 ， 进 六 第 了 步 ， 






南下 本 和 RahTea | 二 间 本 本 癌 可 faaM 记 


有 再 是 生 下 汪 本 LE 合同 本 站 本 下 『 本 下 2 国 1 4 各 放下 寺 9 员 二 村 是 3 


”| 几 下 汪 T 全 汪汪 The WEN il 全 1 全国 TD TI 了 
肌 强 朋 

天 革 是 1 二 利生 全 本 Ga 1 站 站 机 司 m ae i 
[人 

了 可 名 ia 志 

可 串 [ 

上 本 页 有 ET 放生- 同 恒 -8 让 站 1 证- 而 机 看 上 再 基本 看 司 朋 50 本 十 要 .时 大 @b 叫 
上 昌 利 贞 m 本 困 本 几 - 旺 或 林 动 ee 本 年 一半 IE 本 省 二 证 是 时 国 丁 世 二 本 二 后 = 

和 LS 


图 牛 生 IEeamaoa 标 得 矶 


图 二 凤 两 挤 妈 元 Hoffisld 网 阁 Demas 初 放 界面 


1 
Ta| 





桥 汗 15 目标 向 量 了 定 久 窗口 


第 3 步 ; 该 步 驰 持 制 Hopfield 网 绍 状 态 室 间 ， 其 中 用 星 号 标识 了 上 壕 的 两 个 稳定 点 ， 
如 图 汪 垣 所 示 ， 图 中 的 上 半 克 耸 注 绽 制 的 稳定 点 位 置 ， 下 半 部 分 为 用 于 双 制 的 可 码 。 单 击 
【Nextss>]】 技 钮 ， 进 六 第 4 步 。 





图 #-16 控制 稳定 点 的 忆 置 






第 让 步 ， 这 一 步 创建 了 一 个 有 两 沾 神 经 元 的 Hopfield 同 络 ， 其 对 应 的 宣 口 和 图 4.16 基 
未 相同 ， 惟 一 的 区 别 就 是 下 半 部 分 的 代码 窗口 ， 其 中 的 代码 为 ， 





5 人 二 ESMATLAB5wi 
单 击 【Nexte>】 技 钮 ， 进 六 第 5 步 。 


第 5 步 :在读 步 中 , 使 用 目标 向 量 工 对 网 络 进行 优 真 , 检查 工 是 否 已 经 存储 到 网 阁 中 ， 
其 对 应 的 窗口 和 图 4.16 基 志 相 同 ， 惟 一 的 区 别 也 是 下 半 部 分 的 代码 窗口 ， 代 码 为 : 







输出 结果 为 : 


站 果 和 得 想 的 一 致 ， 网 络 的 输出 就 是 目标 向 量 T。 单 击 【Nextx>] 按钮 ， 进 入 第 6 步 。 
各 各 步 ， 访 步 用 于 簿 试 网 络 的 灼 定 性 。 测 斌 方法 为 给 网 络 提供 一 个 随机 向 量 ， 并 且 
对 网 阁 做 加 次 仿真 ， 检 查 输 册 结果 。 设 想 输出 值 应 读 为 网 络 的 基 个 稳定 点 。 访 步 对 应 的 窗 


日 和 图 本 二 几乎 一 致 ， 区 别 在 于 代码 的 不同 ， 八 码 为 





这 一 步 中 还 没有 显示 输出 站 果 ， 单 击 【Nextz>]】 按钮 ， 进 入 第 了 步 ， 

第 了 步 ; 该 步 挫 制 了 上 一 步 给 定 的 随机 点 的 运行 轨迹 ,结果 如 图 小 17 启示, 可 以 省 岂 ， 
仿真 的 输出 结果 量 此 达到 了 稳 和 点 【 - 411， 这 和 设想 的 情况 是 咖 台 的 .为 了 更 有 效 地 说 
明 Hopfieid 网 络 对 目标 点 的 跟踪 能 力 ， 还 需要 全 进 一 步 的 副 试 。 单 击 【Next>>】 技 但 ， 进 


和 最 后 一 步 。 


h Er aa nm 刁 HH 5 m 严 
eg 二 | 


CT 


总 的 汪 1 后 4 状 , 旨 . 相 语 2 币 SE ra 1 





图 二 i7 全 高 站 果 


第 中 步 ; 在 这 一 步 中 , 选择 了 25 个 随机 值 作为 起 始点 ， 看 在 仿真 后 的 输出 能 否 回 到 秃 
定点 。 读 步 的 代码 为 : 


1 四 


而 到 三 面 | 上 
的 
| 是 入 m 区 国 本 1 本 | 攻 于- 李 轩 


1 | 站 
该 步 仿真 的 辣 果 如 图 4-18 所 示 。 可 见 ， 所 有 的 仿真 输出 者 回 到 了 相应 的 入 定点 。 起 始 


点 离 哪 一 个 种 定点 近 ， 战 量 将 赵 向 于 哪 一 个 稳定 点 。 正 是 由 于 具有 这 种 对 一 个 初始 输入 能 
乒 找 到 相应 的 最 近 的 存储 值 的 能 力 ， 使 得 Hopfieid 网 络 十 分 有 周 ， 









图 龙 语 站 站 轧 始 忻 下 的 怖 真 帖 果 
425 基于 Hopfield 网 络 的 数字 识别 


字符 乌 别 是 计算 机 模式 识别 的 一 个 重要 方面 。 必 为 字符 识别 的 组 成 部 分 之 一 的 数组 识 
别 在 邮 收 、 交 通 及 商业 票据 管理 方面 有 着 极 高 的 虚 用 价值 。 目 前 有 烩 事 种 方法 用 于 字符 识 
别 ， 主 要 和 为 神经 网 妾 识别 、 概 率 统计 识别 和 模 朝 识别 等 。 近 年 来 ， 神 皮 网 络 识别 技术 性 
展 较 棋 ， 由 于 其 本 身 具 有 自学 习 和 自 组 织 等 忧 度 特性 而 日 益 受 到 重视 。 目 前 ， 对 印 剧 悼 的 
字符 识别 技术 已 经 比较 成 将 了 ， 而 手写 体 字 符 由 于 书写 者 的 因素 ， 性 得 字符 图 像 的 随意 性 
很 友 ， 比 如 笔画 的 烛 虹 、 字 体 的 大 小 .手写体 的 情 插 诬 和 局 部 所 曲 竺 直接 影响 到 字符 的 正 
确 识别 。 因 此 ， 手 写 体 字符 的 识别 是 字符 识别 领域 最 有 挑战 性 的 课题 ， 
出 于 篇 幅 的 原因 ， 这 里 和 不 研究 手写 信 字 符 的 识别 ， 而 是 针对 印刷 体 的 数字 识别 来 设计 
一 店 昌 opfield 网 络 。 正 常 的 和 被 只 声 污染 的 囊 字 如 图 4-19 所 示 。 
吕 1 训导 可 革 相 了 每 秆 
存放 志 了 让 了 且 生 


图 4-19 正常 的 数学 和 访 行 浊 的 监 字 
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1 种 瑟 问 纤 证 PSNMATLAB yw 
例 录 1 设计 一 个 Hapfield 网 络 ， 司 其 具有 联想 记忆 功放 ， 人 能 正确 识别 阿拉 伯 袁 字 ， 当 
数字 禧 喷 声 污染 后 人 可 以 正确 地 识别 。 
假设 网 络 由 10 个 韦 冶 稳 柬 值 0-9 构成 ， 即 可 以 记忆 10 种 草 字 。 季 沾 稳 厅 由 各 芝 训 
的 矩阵 构成 ， 读 矩阵 用 于 卉 所 阿拉 伯 数 字 点 阵 。 岳 调 烙 字 点 阵 ， 就 是 将 数字 化 分 成 很 事 小 
方 刻 ， 上 珀 一 个 小 方 酌 克 对 应 着 一 部 分 晶 字 。 这 里 将 数字 划分 成 一 个 吉 芭 吉方 阵 ， 其 中 ， 有 
数字 的 方志 用 1 坦 未 ， 室 和 白 处 用 =- 1 表示， 如 图 条 加 所 示 。 






图 小 一 数 字 1 的 歼 字 点 阵 


= 用 . 
和 吾 


“出 于 篇 幅 的 原因 ， 这 里 只 列 出 1 和 了 的 点 阵 表示 形式 。 利 用 这 两 个 向 量 构成 一 个 训 冉 
样本 ， 并 由 此 构建 一 个 Hopficid 网 络 。 










给 出 一 个 受到 喔 声 污染 的 数字 工 的 点 阵 No2， 





所 请 咯 声 ， 实 际 上 坝 是 数字 点 阵 中 的 某 圳 位 由 原来 的 1 畸变 为 - 1， 或 者 
相反 。 如 图 421 所 示 ， 就 是 党 到 污 则 后 数字 1 的 数字 点 阵 ， 
“ 接 下 来 党 试 利用 刚刚 剖 建 的 Hopfictd 网 绍 将 受到 呈 声 污染 的 数字 2 识别 出 来 . 








炎 果 为 ; 
下 STILLITITTTLE LiL 土 半 二 站 上 业 -t=- -1=1=1-1LL 业 4 <=<1 [Le 
1Ti -1 Ti 于 LEI 二 了 业 和 = 上 汕 =1 -1 -11 -1 -11 


了 二 8 


二 后 作 二 失忆 li 区 


-Ti-i-i-I-1-TIttiltI 1LLILLLLT-L-L 
结果 和 数字 了 的 正常 点 阵 是 一 致 的 ， 说 明 网 络 从 受到 将 娄 的 数字 2 的 点 阵 中 识别 出 了 
数字 2， 此 网 络 是 有 效 的 ， 





图 4.21。 受 赋 声 污染 的 【的 数字 点 阵 
本 实例 的 MATLAB 代码 为 ， 





4.3 CG 网 络 模型 及 应 用 


cCG 网 络 植 型 是 由 Cohen 和 Grossbens 给 出 的 , 它 是 Hopfield 神 弃 网 络 的 一 种 推广 形式 ， 
和 Hopfield 网 络 不 同 ，CG 网 总 神 经 元 的 状态 不 再 是 二 值 的 ， 而 是 根据 一 组 常 微分 方程 过 
凿 地 变化 。CGG 网 络 主要 用 于 联想 记忆 ， 信 息 存 在 于 系统 的 局 部 量 小 值 上 。CG 模型 是 综 侣 
了 神经 生物 学 ， 群 体 生 物 学 和 进化 座 的 观点 而 提出 的 ， 在 信号 处 理 和 优化 问题 等 领域 有 着 
广 怪 的 庶 用 。 


4.3.1 CQ 神经 网 络 理论 
CG 同 络 模型 可 用 大 下 的 党 微分 方程 进行 描述 ， 


4 





瑟 
Jj=1 


Se 60- 加 ao 这， 


其 中 , 跨 为 大 于 等 于 2 的 数 ， 表 示 网 络 中 的 神经 元 数目 ， 关 表示 第 站 个 神经 元 对 应 的 状态 ， 


包 为 正 调 函数 ， 即 &, > 0 ，> 为 单调 递增 函数 ， 即 卢 0 ，| 疡 所 构成 的 nx 维 矩阵 了 为 连 


接 权 人 矩阵， 描述 了 各 神经 元 之 间 的 耦合 程度 ， 且 局 = 1 ;5 为 激励 函数 ，》 zs (xz ) 表 


了 =1 
示 神 经 元 的 输入 。 
上 式 有 一 个 重要 的 特点 ， 即 全 局 站 化 性 ， 也 就 是 说 ， 如 果 权 矩阵 工 是 对 称 的 ， 在 任何 
给 定 的 初始 条 忻 下 ， 上 式 总 能 收效 于 系统 的 某 一 个 等 价 形式。 


4.3.2 基于 CG 网 络 的 有 限 元 分 析 


CG 网 络 在 结 析 分 析 中 的 应 用 比较 广泛 , 十 面 简单 介绍 一 下 基于 CG 网 络 的 有 限 元 分 析 
的 步骤 。 

(1》 有 限 元 预 处 理 ， 包 括 有 限 元 网 络 划分 ， 建 立 单位 刚度 窍 阵 和 结 氮 载荷 矩阵 等 。 

(2) 形成 神经 网 络 计算 系统 ， 选 择 合适 的 参数 ， 组 织 神经 网 络 求解 动力 学 方程 。 

(3) 求解 神经 网 络 动力 学 方程 。 该 步骤 中 最 关键 的 问题 是 得 到 方程 的 稳 态 解 ， 一 般 采 
用 数值 方法 来 模拟 整个 动力 学 过 程 。 常 用 的 数值 方法 有 最 速 干 降 法 、 共 斩 梯 度 法 和 龙 格 一 
库 塔 法 等 。 

由 于 神经 网 络 工具 箱 疫 有 为 CG 网 络 设计 专门 的 函数 ,因此 , 在 确定 了 动力 学 方程 后 ， 
需要 利用 MAILAB 强大 的 数学 计算 及 分 析 功 能 实现 基于 CG 网 络 的 有 限 元 分 析 , 具体 实例 


在 此 不 再 列举 。 
4.4 盒 中 脑 (BSB ) 模型 及 MATLAB 实现 


盒 中 脑 〈Brain-State-in-a-Box，BSE) 神经 网 络 模型 首先 是 由 Anderson 等 人 于 1977 年 
提出 的 ，Golden 等 人 对 该 模型 进行 了 深入 的 研究 。BSB 模型 是 一 种 结 点 之 间 存 在 横 调 连接 
和 结 点 自 反馈 的 单 屋 网 络 ， 可 用 做 自 联想 最 邻近 分 类 器 ， 并 可 存 情 任何 模拟 向 量 模式 。 


4.4.1 BSB 神经 网 络 模型 描述 


BSB 网 络 模型 可 用 如 下 方程 描述 : 
美 ( 玫 +H=S (和 (TCRX (让 天 =0.12… 


13 和 0 
| 


初始 条 件 为 (0)= X0， 基 中 基 (N)= (5 (8 (6) sa ( 昌 )e Re 表示 上 时 刻 的 状 太 


向 量 ， 奢 数 放 是 一 正 值 ， 用 于 控制 层 内 反馈 的 大 小 。 钙 三 R 为 对 称 的 权 和 矩阵， 传递 函数 
中 的 第 1 个 坐标 通 需 为 以 下 形式 : 


国人 
吕 ( 生 )= 1 古国 |< 
一 1 澳 守 一 | 


随 着 时 间 的 推移 ， 旧 个 状态 工 逐 捧 赵 近 于 士 。 宰 际 上 ， 当 承 斩 达 到 某 个 平 衔 态 后 ， 状 
毒 (阁下 加) 进入 由 人 芋 .十 …, 士 由 构成 的 盖子 的 某 一 角 。 
4.4.2 BSB 的 MATLAB 实现 

神经 网 络 工具 箱 中 设 有 为 BSB 网 络 提供 专门 的 函数 工具 。 因 此 ,无 法 利用 神 皮 网 络 工 


具 箱 中 的 函数 创建 训练 并 应 用 网 络 。 但 是 ，Hugh Pasika 于 1997 年 基于 MATLAB 平台 开 
发 了 BSB 网 阁 的 实现 函数 。 代 码 如 下 : 





151] 











读者 可 名 特 上 述 代 三 保存 为 一 个 贸 询 sdefnem 的 立 件 ， 存 储 到 XMATLAB7Awark 
立 忻 记 中 ， 其 中 其 为 MATLAB 的 安装 盘 的 盘 符 。 然 后 在 MATLAB 主 窗口 中 将 Cument 
Directory 当前 目标 修改 为 X:MATLAB7hwork， 在 命 地 行 窗口 中 输入 “help bsh” 后 技 回 车 
键 ， 出 现 如 下 的 帮助 信息 。 
Te Esteeta) 
TiE -fils dupliecates the 再 rain 号 late in 二 下 xx 医 xPerirment， 
虽 一 下 人 WESCDT 
et = eedhaeck factor 
攻 = 站 三国 二 放 eraGmS TUired for ConwerEemCE 
本 Rh Pa 让 到 1997 
帮助 信息 解释 了 函数 各 个 参数 的 意 广 ， 其 中 ， 
二 办 信 阿 量 : 
重 。betia 友情 因子 ， 
间 5 最 大 选 代 次 数 。 
下 面 蛤 定 输 闪 向量 和 反馈 因子 , 帝 示 bsb 函数 的 功能 。 令 三 [0.5;-0.6]，beta=0 5, es100， 
ce 用 于 限制 选 侈 次 数 ， 造 代 终 止 的 充分 末 件 是 网 络 已 经 收效 或 者 网 络 的 造 代 次 数 达 到 最 大 
值 <， 在 命 地 行 窗口 中 输入 以 下 代码 后 技 回 车 键 。__ 
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其 中 cr 表示 网 阁 的 补 始 输 闪 值 为 0.5， 了 6 二 05 FrereersTrrart 25 次 迁 他 局， 榈 
始 值 就 达到 了 箱子 的 一 和 《il-17， 因 为 初 的 值 与 它 的 画 敲 最 小 。 输 六 向 量 的 收 总 轨迹 如 图 


图 二 -22 辆 六 向量 的 收 妆 遇 和 这 


4.5 双向 联想 记忆 (BAM) 及 MATLAB 实现 

观 问 联 蚂 记忆 【Bidirectional 点 ssociative emory， 也 AM 网 络 是 由 Kosko 报时 提出 来 
的 , 它 是 一 御 可 以 记忆 模式 对 的 两 层 非 线 性 反馈 神 竖 网 络 ， 它 采用 前 向 和 反 向 观 癌 联想 ， 从 
一 全 铺 入 对 (4, 8 回忆 另 一 个 相 革 的 政要 性 向 量 对 【 轴 , 虽 ), 故 称 为 双向 联想 存 傅 器 。BAM 
杆 凤 网 络 在 知人 能 系统 中 有 有 送 比较 广 芭 的 应 用 。 


Kosko 型 BANM 网 络 模型 


已 AM 网络 可 以 存储 两 组 向 量 ; 于 人 雏 向 量 4 和 挛 扒 向 量 日 


几 三 [加 沽 5] ， 其 申 ， 一 下 过 癌 和 二 1 三 站 ,下 一 1 
日 =[ 而 ,和 …- 包 3] ， 其 中 ， 一 1< < 上 = 0 一 1 


以 上 两 组 向 量 构成 一 组 向 量 对 【4 , 且 ])， = 由 1…, 有 1， 共有 对 样本 向 重 。 将 


官 们 究 供 竺 BAM 网 阁 夯 可 进行 由 点 到 豆 或 由 下 到 4 的 双向 联想 。 妇 果 有 病 声 或 缺 频 岂 ， 
酉 胃 动 能 可 使 幸 二 对 复原 。 

BA 同 站 有 很 记名 结构 慑 式 ， 区 osko 型 EAM 网 癌 是 其 中 最 基 二 的 一 种 ， 其 阁 构 如 图 
-23 所 示 。 图 中 与 向 量 点 对 应 的 一 屋 有 下 直 半点 ， 另 一 旺 对 应 着 向 量 且 由 严 个 结 点 组 碟 。 
两 屋 之 间 双 向 过 摘 。 假 定 由 中 到 4 的 传输 方向 为 正 向 ， 期 由 上 到 下 的 忧 旺 方向 为 反 向 。 正 
向 的 权 值 乒 阵 为 W， 反 向 权 值 矩阵 为 WT。 
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图 423 Kosko 型 BAM 网 络 结构 
如 果 输 入 舌 量 由 上 层 加 入 , 且 对 应 于 网 络 中 玫 的 稳定 状态 ， 则 经 过 权 值 殉 的 作用 产生 
4 稳定 状态 。 同 理 ， 若 输入 矢量 由 下 层 加 入 ， 且 对 应 于 4 的 稳定 状态 ， 则 经 开 的 作用 产生 


召 稳 定 状 态 。 
对 于 BAM 网 络 ， 若 和 输入 为 任意 矢量 ， 网 络 状态 转换 过 程 如 下 : 


用 加 (的 一 4 人 + 
克 "44 人 + 拉 一 吾 信 二 2] 
W 瑟 人 +2) 一 4f+3) 
直到 4 和 如 均 达 到 稳定 状态 ， 转 换 过 程 就 结束 。 
BAM 网 络 按照 Hebb 规则 进行 学 习 , 在 给 定 双 极 性 向 量 对 (4.,8.)，s=01… 于 -1 的 





前 提 下 ， 权 值 矩 阵 的 表达 式 为 : 
风 = 守 4B 


术 7 = 光 
经 证 明 ， 网 络 状态 经 过 一 定 的 变换 过 程 后 ， 网 络 将 会 进入 某 一 个 稳定 状态 。 


4.$52 BAM 网 络 的 实例 分 析 


利用 神经 网 络 实现 联想 功能 ， 一 般 有 两 种 联想 形式 ， 即 自 联想 和 异 联想 〈 双 向 联想 )。 
Hopfield 网 络 属于 自 联想 模式 ,而 BAM 网 络 属于 双向 联想 模式 ,这 种 网 络 的 特点 是 会 收 笋 
于 吸引 子 ， 使 它 可 以 用 做 联想 记忆 存储 器 ， 即 合理 选择 权 系 数 ， 使 网 络 的 稳 态 为 一 组 状态 
三 。 稳 态 应 该 为 天 与 初 态 在 Hamming 距离 上 最 近 的 状态 。 

本 例 是 研究 BAM 网 络 在 飞机 空中 特 情 处 理 中 的 应 用 。 由 于 MASLAE 没有 为 BAM 网 
络 提供 专门 的 函数 ， 所 以 只 有 通过 MATLAB 给 定 的 算法 来 解决 这 个 问题 。 

1， 问题 描述 

下 面 以 飞机 的 发 动机 为 例 ， 设 发 动机 喘 振 的 标志 量 为 故障 代码 1 (C1)， 发 动机 鲁 烟 的 
故障 代码 2〈C2)7， 有 爆 音 的 标志 量 为 故障 代码 3 〈C3)。 
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遇 飞 机 撤 际 向 量 为 改动 机 停车 ， 《 巨 1 乓 缩 加 时 报 【IE2T， ， 鉴 动机 失火 【B37， 观 转子 
弯 尖 昔 转 了 予 【B4)。 当 上 还 战 障 威 立 时 ， 它 的 值 为 二 值 量 1 

设 故 障 特征 大 昭 向 量 为 蛇 动机 商 压 转速 N2， 爱 动机 低压 转速 N1， 排 气温 度 T4， 忆 行 
速度 W， 炊 警 杂 亮 Hij， 破 障 代 三 1 1C1)7， 硕 障 代码 2 【Ci1， 前 障 代 三 3 04C34。 其 中 ， 
Hj、E1、 避 、C3 为 二 仁 量 ，1 表示 成 立 / 站 表示 不成立 。N2、NI、T4、YV 连续 下 降 为 1， 
连 妹 上 升 为 库 1 捕 本 时 这 些 参 数 为 二 值 量 )。 

技 丫 凡 下 的 太 式 定名 处 置 措施 向 量 [M1.MZM3.M]- 

(ELML) 13 抱 油门 收 到 停车 位 置 ;, (21 检查 商 度 ， 向 就 近 机 场 下 狼 : (43》 粒 查 补 
氟 压 力 ， 做 好 开车 蕉 备 ， 

[E2M23s ti 嫩 果 推油 门 杆 时 产生 丁 振 ， 应 喜 即 收 油门 杆 儿 性 车 位 置 ， 若 中 拆 停止 
则 推油 门 杆 时 应 柔和 ， 著 响 振 不 停止 则 应 停车 ， 类 后 按 规 定 进行 空中 开车 。!2) 如 果 由 于 
进 气 道 喘 振 而 引起 压缩 紧 喘 振 ， 应 断 开 加 力 ， 将 故 气 门 损 电 电 门 报到 向 下 ， 间 检查 转速 和 
哮 气 晕 诬 的 指示 情况 。!37 可 时 飞机 进 六 嵘 族 而 引起 喘 振 ， 应 首先 收 宙 门 杆 到 慢车 忆 置 ， 
华中 精力 改 册 螺旋 ， 待 改 出 螺旋 后 再 检查 发 动机 的 工作 情况 。 如 果 鉴 动机 已 停车 ， 应 收 污 
门 丁 到 停车 位 置 3-4s 以 上 ， 以 吹 陈 燃烧 室内 的 积 油 ， 媳 后 再 进行 室 中 开车 。 

〖1 EMWMSY TY 蛋 油 门 酝 到 停车 位 置 ，t2》 甘 闭 一 。 三 、 三 泪 泵 ; 131 用 上 升 的 方法 
减速 到 400-500Kmh， 4) 按 无 淡 技 幅 ， 灭 灶 后 ， 禁 止 空中 开车 : 145) 如 没有 条 件 迫 降 或 
死 尖 不 成 功 诬 上 吨 伞 。 

【E4 4 1T) 保持 转速 不 小 于 85 有， 移动 油门 杆 应 特别 柔和 ， 以 免 造 成 改动 机 阶 振 
停车 ，f27 立即 返 筷 ， 站 转 森 后 翁 保持 转速 下 小 于 公 癌 ， 可 用 减速 慨 调 不 下 请 速度 ， 划 明 
确 有 把 担 进 入 跑道 时 ， 用 收 锅 门 杆 美 车 的 方法 修正 目 副 ; 13? 如 已 过 成 监 动机 炬 淡 停 车 时 ， 
虽 庶 捷 当时 实际 情况 被 定 味 章 或 迫降 ， 

媳 码 方案 ; 故 陈 向 量 Y=[E1 E2 E3 E4], 故障 特征 参数 向 量 为 x=[IN2N1T4 Hj Cl c2C3l， 
处 置 措施 向 量 为 z=[MI M2 M3 M4]。 则 有 ; 






2 仿真 运算 
实现 联想 的 关键 是 充分 训练 联盟 权 阵 ， 使 竟 络 达到 稳定 。 在 确保 网 络 稳定 的 前 提 下 ， 
首先 形成 联想 矩阵 ， 由 Hebb 学 习 规 虽 将 所 有 的 向 量 转化 为 双 极 性 的 形式 ， 有 


根据 联 起 矩阵 的 定义 ， 可 以 利用 MATLAB 数学 计算 功能 得 到 联想 矩阵 W。 实 验证 明 ， 
联想 矩 孟 既 过 充 苍 的 学 习 和 训练 后 。 可 以 达到 较 好 的 效果 。 
人 
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给 定 训练 样本 后 ， 就 可 以 对 网 络 进 行 训练 。 
4.6 回归 BP 了 网络 及 应 用 


误差 反 向 传播 BP 算法 是 前 向 网 络 学 习 算法 中 应 用 最 为 广泛 的 算法 ， 因 此 ， 一 些 研究 
尝试 将 BP 算法 中 采用 的 梯度 下 降 法 推广 到 回归 网 络 中 ， 由 此 产生 了 回归 BP “Recurrent 
BP) 网 络 。 


4.6.1 问 归 BP 网 络 概述 






回归 BP 网 络 同 时 具有 反馈 和 前 馈 机 制 ， 这 就 意味 着 在 网 络 的 一 个 训练 周期 中 ， 网 络 
的 输 负 同时 反馈 给 网 络 的 输入 神经 元 作为 网 络 的 外 部 输入 。 如 图 4-4 所 示 ， 为 一 个 典型 的 
三 层 回 妇 BP 网 络 。 





输入 层 中 间 屋 输出 层 


区 4-24 回归 BP 网 络 
在 图 4.24 中 ， 输 入 层 有 一 个 于 维 的 输入 向 量 和 一 个 阐 值 结 点 ， 该 结 点 的 值 是 固定 的 ， 
这 个 值 的 存在 保证 了 网 络 的 收 笋 特性 。 中 间 层 有 产 个 神经 元 和 一 个 阔 值 结 点 。 相 邻 两 层 的 
所 有 神经 元 采用 全 连接 的 方式 相连 。 输 入 层 的 神经 元 输入 输出 关系 可 以 表示 为 ; 
玉 =OI = 万 = 二 2 
0 = = ) 
其 中 , 正 表 示 输 入 层 , 输入 神经 元 和 隐 售 神经 元 之 间 实 现 加 权 和 连接. 即 如 果 信 和 号 从 第 字 个 神 
经 元 传递 到 第 j 个 神经 元 ， 则 信号 需要 乘 上 两 个 神经 元 之 间 的 连接 权 值 w。 令 Ci 表示 第 
个 神经 元 的 输出 ， 第 让 个 神经 元 的 输入 则 为 QHWy。 对 第 7 个 神经 元 的 输入 进行 求 和 ， 可 得 
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式 中 ， 昌 为 阅 值 项 ， 叫 表示 中 间 层 。 这 种 加 法 操作 是 通过 中 间 层 的 处 理 器 实现 的 ， 实 现 加 
法 的 过 程 融 是 激发 神经 元 的 过 程 。 直 于 神经 元 的 权 值 和 输入 可 以 取 正 值 ， 也 可 以 取 负 值 ， 
因此 区 神 经 元 的 激发 有 可 能 产生 正 值 、 负 值 和 和 零 值 中 的 任意 数据 。 中间 层 的 激发 函 煞 为 : 


7 700- omyroy] 了 = 12,… 现 


= 


对 于 输出 层 Y 它 的 第 下 个 神经 元 接收 了 中 间 层 第 了 个 神经 元 的 输出 信号 , 经 过 加 权 后 ， 
作为 自己 的 输入 信号 ， 可 以 得 到 同上 面 类 似 的 结论 。 


产 = 全 DOT + 芭 天 =12…8 


J=1 
wy0D=H|ow | 1 
1 


回归 BP 网 络 的 传递 函数 见 干 式 ， 这 是 一 种 非常 则 型 的 函数 ， 具 有 很 多 优点 。 它 是 连 
续 可 导 的 ， 输 出 也 是 连续 的 并 且 们 于 区 间 10,1H 中 。 如 图 4-25 所 示 ， 月 为 函数 的 斜率 。 


1 
了 
门 了 二 -~ 品 
7 (na 1+expf 一 B*mer) /> 
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图 425 回归 BP 网 络 传 递 国 数 曲线 【 癌 =1) 


4.6.2 ”基于 回归 BP 网 络 的 房价 预测 


房价 及 其 变化 趋势 是 很 多 人 关注 的 焦点 ， 也 是 制定 合理 的 购房 策略 的 基础 。 现 以 某 城 
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Ri 
， > 本 ， 此 和 有 - 昌 国 了 站 1 ， 区 莹 悚 - 人 ， 
市 的 房价 预测 为 例 ， 展 开 基 于 回归 BP 网 络 的 预测 研究 。 

一 般 来 说 ， 房 价 受 宏 观 调控 政策 、 房 产 和 人 口 等 多 方面 的 影响 ， 可 以 将 房价 写 为 如 下 
的 函数 模型 ， 





REP= (CCDJ=Uayamb 


其 中 ,RE5P 表示 房价 , 他 12 pm 二 12 0。 人 表示 在 上 时 间 段 中 对 房子 的 总 体 需求 ， 
已 , 表示 在 上 时 间 段 中 房子 的 总 体 供 应 。x 表示 宏观 经 济 变量 ， 如 GDP 等 。， 表示 与 买方 相 
美的 变量 ， 如 家 庭 平 均 收 入 等 。z 表示 与 人 口 统计 相关 的 变量 ， 如 人 口 比例 、 新 婚 人 口 数目 
等 。y 表示 与 卖方 相关 的 变量 ， 如 建 房 费用 和 地 皮 价 格 等 。x、y、x* 和 z 是 完全 无 关 的 变 重 . 

由 于 房价 受 允 方面 因素 的 影响 , 在 建立 一 个 房价 预测 模型 时 ， 需 要 综合 考虑 多 种 内 素 。 
而 BP 算法 在 处 理 多 和 输入 的 非 线性 系统 的 过 程 中 表现 出 了 相当 强 的 能 方 ， 所 以 这 里 采用 BP 
咎 法。 之 所 以 采用 递归 BP 网 络 ， 是 因为 房价 是 一 种 时 间 序 列 信号 ， 目 前 的 数据 可 能 对 以 
后 的 数据 产生 重要 的 影响 。 

由 于 MATLAB 神经 网 络 工具 箱 中 没有 为 递归 BP 网 络 提供 专门 的 工具 , 所 以 这 里 只 给 
出 基于 递归 BP 网 络 进行 房价 预测 的 有 关 思 想 ， 具 体 算 法 读者 可 参见 有 关 的 资料 ， 并 利用 
MATLAB 的 数学 计算 功能 实现 。 


4.7 Boltzmann 机 网 络 及 仿真 


Hinton 等 人 在 1985 年 将 模拟 退火 算法 引入 到 神经 网 络 中 ， 提 出 了 Boltzmann 机 网 络 ， 
简称 BM 网 络 。 


4.7.1 _BM 网 络 的 基本 结构 


BM 网 络 结 村 与 离散 Hopfield 网 络 结构 相似 ， 由 六 个 神经 元 组 成 ， 每 个 神经 元 取 0-1 
二 值 输出 ， 且 神经 元 之 间 以 对 称 连 接 权 相互 连接 。 与 Hopfield 网 络 不 同 的 是 ，BM 刚 络 通 
常 将 整个 神经 元 分 为 可 视 层 和 隐 含 层 两 大 部 分 。 可 视 层 又 可 分 为 输入 部 分 和 输出 部 分 ， 但 
它 与 一 般 阶层 网 络 的 区 别 在 于 它 没有 明显 的 层次 界限 ， 且 神经 元 之 间 不 是 单 向 达 接 而 是 双 
向 连接 的 ， 如 图 4-26 所 示 。 









可 视 屋 
输入 部 分 Si 输出 邹 分 
1 、 
上 aa， 
用 
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图 4-25 BM 网 络 结构 
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4.7.2 BM 模型 的 工作 规则 和 学 习 规 周 


BM 网 络 的 算法 根据 其 用 途 可 以 分 为 工作 规则 和 学 习 规 则 。 工 作 规 则 也 就 是 网 络 的 状 
态 更 新 规则 ， 主 要 用 于 优化 组 合 问题 。 学 习 规 则 就 是 连接 权 值 和 输出 阔 值 的 修正 规则 ， 主 
要 用 于 将 网 络 作为 一 个 外 界 概率 分 布 的 模拟 机 的 场合 .这 也 是 BM 网 络 的 一 个 独特 的 方面 。 
首先 介绍 BM 网 络 的 工作 规则 。 

实际 上 ，BM 了 网络 的 工作 规则 就 是 模拟 退火 算法 的 具体 体现 ， 其 步骤 如 下 。 


假定 网 络 有 六 个 神经 元 ， 各 神经 元 之 间 的 连接 权 值 为 Wi ， 各 神经 元 的 输出 阔 值 为 口 ， 
输出 为 贡 ， 神 经 元 1 的 内 部 状态 为 已 ， 7 =12 ,ww 。 网 络 温度 7 了 1-o= 硬 ， 为 ww 和 必 赋 


予 区 间 [ - 1 之 间 的 随机 值 ， 并 令 wj = mwi。 
1》 从 不 个 神经 元 中 随机 选取 一 个 神经 元 忆 


《2) 按照 下 式 求 出 神经 元 的 输入 总 和 ， 即 内 部 状态 五, : 
玉 们 = 之 * wo (8 
(3) 按照 下 式 得 到 的 概率 将 神经 元 状态 更 新 为 1; 
忆 [z (+ 了 = 1]= TO 


(4) 了 以 外 的 神经 无 的 输出 状态 保持 不 变 ， 
i++)= 世 (人 7=12…N， zi 


(5) 令 f=t+1， 按 照 下 式 计算 新 的 温度 参数 7{t+1T): 


Tt+ D= 吉 CH 
《6) 返回 到 步骤 (17， 直 到 温度 参数 了 小 于 预先 设 定 的 截止 温度 Ta。 
在 步骤 〈3) 中 更 新 网 络 状态 ， 一 般 有 两 种 方法 。 
(1) 豆 (人 >0 时 ， 直 接 令 z ff+l)=1;， 吾 {f<0 时 ， 产 生 一 个 位 于 区 间 [0.0.5] 内 的 随 





机 数 E(DJ;， 当 Pa 人 +D= 吕 > 时 ， 念 后 (+1=1， 否 则 令 大 (+ 蕊 = 大 (9。 


(2) 也 (人 >0 时 ， 直 接 令 stt+l)=1: 也 所 <0 时 ， 当 P[uwt+1j = 中 大 于 预先 设 定 的 概 
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此 外 ， 关 于 初始 温度 妨 和 结束 温度 Ts5， 一 般 任 经验 给 出 。 

BM 网 络 除了 可 以 解决 优化 组 合 问题 外 ， 还 可 以 还 过 网 络 训练 模拟 外 界 给 出 的 概率 分 
布 ， 实 现 概 率 意义 下 的 联想 记忆 。 联 想 记 忆 分 为 自 联想 记忆 和 互联 想 记 忆 两 种 模式 。 当 把 
一 组 记忆 模式 及 其 概率 分 布 函 数 提 供给 BM 网 络 的 可 视 层 后 ， 网 络 按照 一 定 的 学 习 规则 进 
行 学 习 ， 学 习 结束 后 ， 当 网 络 状态 按照 工作 规则 进行 不 断 转 移 时 ， 网 络 的 各 个 状态 间 按 照 
记忆 的 学 习 模 式 的 概率 分 布 出 现 ， 即 概率 大 的 状态 出 现 的 频率 高 ， 概 率 小 的 状态 出 现 的 毁 
率 低 。 这 种 概率 意义 下 的 联想 记忆 就 称 为 自 联想 记忆 . 

如 果 将 某 个 记忆 模式 提供 给 网 络 的 输入 部 分 ， 同 时 ， 在 输出 部 分 按照 给 定 的 概率 分 布 
给 出 一 组 目标 输出 模式 。 此 时 给 出 的 概率 分 布 函数 实际 上 是 输出 模式 相对 于 输入 模式 的 条 
件 概率 分 布 。BM 网 络 正 是 通过 记忆 这 种 条 件 概率 分 布 函数 来 完成 互联 想 记 忆 的 。 例 如 ， 
由 BM 网 络 对 柴油 机 进行 故障 诊断 ， 当 为 网 络 提供 一 个 “ 排 气 简 有 黑 灯 ”的 故障 模式 后 ， 
在 网 络 的 输出 部 分 按 产 生 这 种 故障 现象 的 原因 的 概率 大 小 提供 一 系列 的 输出 模式 ， 如 汽缸 
点 火 位 置 不 对 ， 油 料 中 有 杂质 等 。 这 样 就 构成 了 网 络 的 学 习 模式 样本 。 

无 论 是 自 联 想 记 忆 还 是 互联 想 记 忆 ， 其 实质 都 是 表 过 学 习 目 标 概率 分 布 函 数 ， 将 其 记 
忆 和 并 在 以 后 的 回想 过 程 中 将 这 一 概率 分 布 再 现 出 来 。 

下 面 首 先 介绍 自 联 想 记 忆 学 习 规 则 。 假 设 网 络 的 共有 # 个 神经 元 ， 其 中 可 视 层 有 半 个 


神经 元 ， 隐 含 层 有 mm= 六 -个 神经 元 。 可 视 层 有 = 2 个 状态 ， 隐 含 层 有 3 = 2" 个 状态 ， 
整个 网 络 则 有 = 2 个 状态 。 各 慨 的 状态 可 表示 为 : 可 视 层 状态 已, = (ui ) 路 含 
层 状 态 世 = 人 ) ， 其 中 a=12…,P，p12…9。 整 个 网 络 的 状态 的 概率 分 布 
函数 为 (5 ,DZ )， 网 络 的 连接 权 值 和 和 输出 阅 值 分 别 为 Ww 和 6 ， 了 =12…, 六 ， 网 络 在 第 
个 状态 时 的 能 量 为 互 (DZ ) 。 学 习 过 程 如 下 。 

(1) 初始 化 。 将 连接 权 w, 赋予 区 间 [~ 1.1] 之 间 的 随机 值 并 令 6) = 0 。 

(2) 按 给 定 的 外 界 概率 〈 目 标 概率 分 布 ) P(z., ) 将 网 络 可 视 层 的 各 神经 元 固定 在 某 一 
状态 世 . = (相国 )。 

(3) 从 温度 轴 开始 ， 按 照 网 络 工作 规则 《〈 即 模拟 退火 算法 ) 对 网 络 隐 含 层 购 各 神经 


元 的 输出 进行 状态 更 新 ， 直 到 达到 温度 也 下 的 平衡 状态 克 = (由 加) 。 


(4) 在 陷 含 层 的 平衡 状态 下 ， 保 持 温 度 六 不 变 ， 再 进行 二 次 全 网 络 的 状态 更 新 ， 每 
次 更 新 后 ， 当 神经 元 ; 和 jj 同时 为 1 时 ， 计 算 下 式 《〈 学 习 过 程 )， 
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(35) 重新 从 温度 加 开始 ， 按 照 网 络 工作 规则 对 全 网 络 神经 元 状态 芭 进行 更 新 ， 直 到 


达到 湿度 7 下 的 平衡 状态 区 = (in 二 。 


《6) 在 阿 络 的 平衡 状态 下 ， 保 持 温 度 环 不 变 ， 再 进行 三 次 多 网 络 的 状态 更 新 ， 每 次 
更 新 后 ， 当 神经 元 1 和 同时 为 1 时 ， 计 算 下 式 【〈 反 学 习 过 程 ): 


二 三 本 十 | 





(7) 返回 步骤 (2)， 一 共 进 行 寻 次 循环 ， 并 要 求 MHz>p，P 为 可 视 层 的 状态 个 数 ， 
(8) 计算 对 称 概 率 已 ,已 


疡 = 2 了 -有 
MIxZILTY 了 MXxELY 


(9) 按照 下 式 调整 网 络 的 连接 权 值 w : 
用 = 同 +E( 下 - 玉 ] 瑟 7 了 =12 


《10) 返回 步骤 〈2)， 直 到 循环 次 数 大 于 或 等 于 预先 设 定 的 值 。 
于 面 介 绍 互 联想 记忆 学 习 准 则 。 在 以 前 假设 条 件 的 基础 上 ， 进 一 步 假设 可 视 层 输入 部 


分 有 如 个 神经 元 ， 对 应 疡 = 入 个 状态 区 = (本 本， 区 输出 部 分 有 mm 个 神经 元 ， 对 应 
机 = 和 如 个 状态 五 = 仁太 )。 


目标 联合 概率 分 布 P(D,, 工 )= P({Z JP(L ID,)。 学 习 步 骤 如 下 。 





(1) 初始 化 。 将 连接 权 W, 赋予 区 间 [ - 1.1] 之 间 的 随机 值 并 令 9, = 0 
(2) 随机 选取 输入 模式 世 = (um ,za 上 5 ) 提 供给 可 视 层 的 输入 部 分 。 


《3) 按照 目标 条 件 概 率 分 布 P{ 到 TD,) ， 将 条 出 模式 去 = 位 礼 ,二 国定 在 可 视 层 的 


输出 部 分 上 。 

(4) 从 温度 7 开始， 按照 网 络 工 作 规 则 【〈 即 模拟 退火 算法 ) 对 网 络 隐 含 层 的 各 神经 
元 的 和 输出 进行 状态 更 新 ， 直 到 达到 温度 五 下 的 平衡 状态 。 

《5) 在 隐 含 层 的 平衡 状态 下 ， 保 持 温度 到 不 变 ， 再 进行 工 次 全 网 络 的 状态 更 新 ， 每 
次 更 新 后 ， 当 神经 元 1 和 了 同时 为 上 时， 计算 下 式 《【 学 习 过 程 ) 
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06) 重新 从 温度 乞 开始， 按照 网 络 工作 规则 对 全 网 络 神经 元 状态 站 进行 更 新 ， 直 到 


达到 温度 总 下 的 平衡 状态 。 

《3) 在 网 络 的 平衡 状态 下 ， 保 持 温度 玉 不 变 ， 再 进行 工 次 全 了 网络 的 状态 更 新 ， 每 次 
更 新 后 ， 当 神经 元 了 和 同时 为 1 时 ， 计 算 下 式 【 友 学 习 过 程 ); 

Pry 三 串 十 

(8)》 返回 步骤 (3)， 一 共 进 行 Mi 次 循环 ， 并 训 求 Wi>pe， 下 为 可 视 层 输出 部 分 的 的 
状态 个 闻 。 

(9) 计算 对 称 概率 已 ,已 - : 

上 1 本 _ 1 - ， 
辣 =- 一 一 -由 五 二 一 一 下 = 

上 xx “ ” 有 xE 


(10) 技 照 下 式 调整 网 络 的 连 楼 权 值 wy : 


W = 由 +e( 末 -三 ]/ 了 三 2 


《11) 返回 步骤 (27， 选 取 下 一 组 学 习 模 式 进 行 对 2 次 循环 ， 且 要 求 Ma2>Ppt， 严 为 可 视 
层 输 入 部 分 的 状态 个 数 ， 
《12) 从 步骤 (27 一 (11) 进行 了 次 循环 后 学 习 结束 ， 其 中 了 为 预先 设 定 的 最 大 循环 


次 数 。 
| 在 对 每 二 组 学 习 模 式 进 行 训练 时 ,给 入 部 分 的 状态 总 是 图 定 在 某 个 给 入 楼 

在 学 习 结束 后 网 络 进行 回想 时 ， 当 给 网 络 的 输入 部 分 提供 一 输入 模式 太后 ， 对 网 络 条 
入 部 分 按照 网 络 工作 规则 进行 状态 更 新 ， 在 网 络 的 输出 部 分 各 个 状态 出 现 的 概率 将 符合 学 
习 过 的 希望 概率 分 布 PLLJUJ)。 














4.7.3_BM 网 络 的 MATLAB 仿真 


这 里 利用 一 个 非常 简单 的 例子 来 说 明 BM 网 络 的 自 联想 学 习 规 则 。 设 网 络 只 有 两 个 神 
经 元 ， 一 个 为 可 视 层 神经 元 看 ， 一 个 为 隐 含 层 神 经 元 册 。 两 个 神经 元 各 有 0-1 两 种 状态 ， 
可 视 层 箱 出 为 1 的 概率 为 六 1。 和 网 络 结构 如 图 4-27 所 示 。 


谷 人 


图 4-27 含有 两 个 神经 元 的 BM 网 络 结构 








朴 re 





1 2 全 
MATLAB 神经 网 络 工 具 箱 申 设 有 关于 BM 网 络 的 函 歼 ， 因 此 ， 朝 要 利用 MATLAB 的 
监 学 计算 动能 来 实现 BM 网 络 的 学 习 和 训练 。 
首先 撕 予 网 络 权 值 wii= =- 10，wo= =- I0。 设 网 阁 温度 为 而 =100，7=10， 以 快速 俐 温 
的 方式 ， 按 要 网 络 工 作 规则 对 同 络 进行 状态 更 新 ， 以 得 到 进行 学 习 和 训 放 之 前 的 状 赤 概率 
分 布 ， 即 网 络 忧 柱 的 朝 始 分 布 情况 ， 旭 表 4-3 所 示 ， 


囊 中 3 下 邱 所 各 村 才 林 





网 络 很 态 对 应 的 能 量 按照 下 起 计算 : 


5 而 融 本 二 而 本 


其 中 ， 点 为 网 络 业 索 的 个 数 ， 这 里 ME。 
网 络 各 个 恩 亚 出 现 的 至 论 概 齐 按照 下 式 计算 ; 


下 好 风 
全)= 2 ， 2z= 立 ep(-E 人 7 
由 表征 3 可 得 同 络 可 视 层 输出 四 1 的 慨 桌 鸭 各 3580402580E06160。 
手下 来 进行 同 阁 学 习 ， 已 知 两 员 记 记 DFTIFEL 设 Tml0t， 卫 10，EE1000， 导 <138。 
r=6，8E=01。 如 表 4-4 所 示 为 每 雇 大 思 环 后 ， 网 阁 可 视 层 输出 为 1 的 概率 分布 。 
惠 业 4 四 略语 得 县 畏 出 为 工 的 限 计 分布 


| 本 ER 
开 FT 生生 司 寺 | 汪 属于 证 -全 全 
网 纤 学 习 早 束 后 ， 以 网 此 衣 诬 Tue=io0，Te 垃 的 快速 降 刘 方式 ， 接 刷 同 里 工 作 乔 则 ， 
他 网 络 进 行 回 轧 。 网 剃 连接 权 的 朝 始 值 海 Wi 一 1 在 了 656，wiE = 16.7656， 同 站 的 回 得 些 果 
如 囊 业 引 所 示 ， 






融 45 网 线 回 想 绮 黑 





sa 





由 表 4.5 可 得 网 络 可 视 层 输出 为 的 梳 率 为 0043040.0550_0.0980。 可 见 网 络 的 实际 要 
率 分 布 和 希望 概率 分 布 01 已 经 十 分 接近 ， 
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本 章 介 绍 了 反馈 型 神经 网 络 及 其 MATLAB 实现 。 反 馈 型 神经 网 络 主要 包括 本 man 网 
络 、Hopfield 网 络 、CG 网 络 、BSB 网 络 、BAM 网 络 、 回 妇 BP 网 络 和 Boltzmann 机 网 络 
等 。 反 馈 型 网 络 的 应 用 领域 主要 是 优化 和 预 珊 ， 其 中 ，Elman 网 络 和 回归 BP 网 络 主要 应 用 
于 预 判 ， 弄 Hopfield 网 络 等 则 主要 应 用 于 优化 。 

神经 网 络 工具 箱 中 只 提供 了 有 关 Eliman 殉 络 和 Hopfield 网 络 的 函数 ， 因 此 ， 利 用 这 两 
种 网 络 来 解决 实际 门 题 是 比较 方便 的 ,本 章 为 Ehinan 网 络 提供 了 一 个 空调 负荷 预测 的 实例 ， 
为 Hopfield 网 络 提供 了 一 个 字符 识 别 的 实例 ， 读 者 可 参照 这 两 个 实例 来 学 习 利 用 神经 网 络 
解 实 际 问 题 的 过 程 。 
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第 $ 章 ” 目 组 织 与 LVQ 神 经 网 络 理论 及 
MATLAB 实现 


自 组 织 神经 网 络 是 -类 无 教师 举 习 的 神经 网 络 模 型 ， 这 类 模型 大 都 采用 竞争 型 的 学 导 
规则 。 自 组 织 神经 网 络 无 需 提供 教师 信号 ， 它 可 以 对 外 界 未 知 环境 【或 样本 空间 ) 进行 学 
习 或 者 仿真 ， 并 对 上 自身 的 网 络 结构 进行 适当 调整 ， 这 就 是 所 请 自 组 织 ， 

本 章 将 介 纳 以 下 内 容 : 

间 。 自 组 织 竞争 网 络 及 MATLAB 实现 
自 组 织 特征 映射 神经 网 络 及 MATLAB 实现 
自得 应 共振 理论 模型 及 MATILAB 实现 
LVQ 神经 网 络 及 MATLAB 实现 
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$.1 目 组 织 竞 争 网 络 及 MATLAB 实现 


竟 争 型 神经 网 络 的 基本 思想 是 网 络 竞争 层 的 各 神经 元 通过 竞争 来 效 取 对 输入 模式 的 响 
庶 机 会 ， 最 乒 仅 有 一 个 神经 元 成 为 竞争 胜 利 彰 ， 并 将 与 获胜 神经 元 到 关 的 各 连接 权 值 向着 
更 有 利于 其 竞争 的 方向 调整 。 自 组 织 竞 争 网 络 自 组织 、 自 适应 的 学 习 能 力 进一步 拓宽 了 神 
经 网 络 在 模式 分 类 和 识别 方面 的 应 用 。 


5.1.1 基本 竞争 型 神经 网 络 概述 
竞争 型 神经 网 络 有 很 多 具体 形式 和 不 同 的 学 习 算 法 ， 本 节 只 介绍 一 种 比较 简单 的 网 络 


结构 和 学 习 算 法 。 网 络 结构 如 图 $-1 所 示 。 
竞争 型 网 络 可 分 为 输入 屋 和 竞争 层 。 假 定 输入 层 由 次 个 神经 元 构成 ， 赏 争 层 有 于 个 神 



























































经 元 。 网 络 的 连接 权 和 从 为 证 1 一 1 2 了 一 1 2，……,a7 且 满 中 约束 条 件 》 w, =1。 


在 竞争 层 中 ， 神 经 元 之 间 相 生 竟 争 ， 最 终 只 有 一 个 或 者 几 个 神经 元 获胜 ， 以 适应 当前 的 输 
入 样本 。 竞 争 胜利 的 神经 元 就 代表 着 当前 输入 样本 的 分 类 模式 。 

竞争 型 网 络 的 输入 样本 为 二 值 向量 , 各 元 素 取 值 0 或 1。 竞争 居 神 经 元 的 状态 可 按 下 
式 计算 ; 





1 os 3 对 。 
人 
1 | ， 9 昌 
SS 
| 拉 








输入 模式 


图 3-1 基本 竞争 型 神经 网 络 结构 
其 中 ， 石 为 输入 样本 向 量 的 第 了 个 元 素 。 根 据 竟 争 机 制 ， 竞 争 层 中 具有 最 大 加 权 值 的 


神经 元 大 赢得 竞争 胜利 ， 输 出 为 ; 
了 -| 8 YJ)， 开关 了 
“ to 其 他 


竞争 后 的 权 值 按照 下 式 进行 修正 ， 对 于 所 有 的 忆 有 : 
一 贡 
1 三 十 供 0 


其 中 ，C 为 学 习 参 数 ，0 < 4 <<1， 一 般 取 为 从 01-0.03， 严 为 输入 层 中 输出 为 1 的 神 
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iE1 
权 值 调整 公式 中 的 二 项 表示 当 拓 为 1 时 ， 权 值 增 加 ， 而 当 为 0 时 ， 松 值 减 小 。 也 
就 是 说 ， 当 x 活跃 时 ， 对 应 的 第 夺 个 权 值 就 增加 ， 否 则 就 减 小 。 由 于 所 有 权 值 的 和 为 1， 


所 以 当 第 个 梳 值 增加 或 减 小 时 ， 对 应 的 其 他 析 值 就 可 能 减 小 或 增加 。 此 外 ， 该 公式 还 保 
证 了 权 值 的 调整 能 够 满足 所 有 的 权 值 调整 量 之 和 为 0。 


5.1.2 自 组 织 竞争 网 络 的 应 用 
本 例 采 用 自 组 织 竞争 网 络 ， 完 成 测 井 资料 的 岩 性 识别 。 神 经 网 络 通过 对 已 知 并 段 测 井 
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数据 进行 学 习 ， 素 预 副 同一 地 区 其 他 井 段 的 岩 性 。 

1， 问 是 措 述 

贮 性 襄 别 是 情 居 评价 的 重要 工作 之 一 ， 是 求解 依 层 套数 的 基础。 惠 用 副 井 资料 进行 兰 
性 识别 有 急 密 衣 读 ， 桂 皮 交 里 方 法 是 一 种 应 肝 比较 广泛 的 刘 祛 之 一 。 

村 例 于 择 某 地 区 的 和 轩 料 进行 研究 。 访 地 区 局 于 柄 酸 夫 地 层 ， 轩 此 需要 刘 断 的 办 性 有 3 
种 ， 团 氟 岩 ， 下 岩 和 五 茧 兽 ， 通 过 对 历史 货 权 的 分 析 和 现场 试 驹 可 知 ， 书 本 岩 性 有 5$ 小 重 
材 的 国 子 ， 即 补偿 中 子 室 际 度 CNL， 裤 偿 害 度 曲 战 DEN、 声 锌 时 兰 DTC、 自 然 伽 王 GR 
和 微 电 肯 上 齐 RT。 

通过 对 历 喝 壮 圭 进行 驹 析 ， 蓝 得了 100 组 样 志 点 ， 册 于 简 幅 的 原因 ， 只 列 一 医 币 的 各 
组 ， 如 要 外 1 所 示 。 接 下 来 就 利用 这 后 盟 样 二 作为 同上 由 的 如 蜂 样 本 。 


惠 于 1 省 性 影响 国 于 4 





aa | 
ITTEIETTEETTEETTEETTEG 
匠 演 本 放 ” | as | ma | aa |oam 
2 0 
利用 示 数 newe 创建 一 个 自 组 织 竟 争 网 络 , 由 于 带 要 区 分 的 类 别 数 目 为 3， 因此， 神经 
元 的 数目 也 为 3， 为 了 加 快 学 习 速 度 ， 将 学 习 速 率 设 置 为 1。 极 枉 为 ， 





网 络 创建 结束 后 ， 接 下 来 消 要 对 网 络 进行 训练 ，MATLAB 代码 为 。 











由 此 可 风 见 ， rr 训练 停止 。 此 时 为 了 檀 验 网 络 前 分 类 性 能 ， 
对 网 络 进行 试 。 利 用 仿真 函数 检验 网 络 对 上 壕 岩 性 模式 的 分 类 . 


AT 
机 数 veind 特 耻 生机 四 和 和 
ai 
结果 为 ， 
ER 
由 此 可 网 ， 交 络 成 功 地 对 上 述 岩 性 模式 进行 了 分 类 ， 其 中 P 的 前 两 组 数据 ( 列 向 量 ? 
为 一 类 ， 中 间 两 组 数据 为 一 类 ， 最 后 两 组 数据 为 一 类 ， 这 与 表 51 中 的 数据 是 唤 台 的 ， 
我 们 知道 ， 采 用 调 练 样本 以 外 的 数据 对 网 络 进 行 测试 ， 是 一 种 最 好 的 员 试 方案 。 现 有 
一 组 石灰 岩 的 影响 因子 ， 接 下 来 利用 该 组 数据 对 网 络 进行 测试 ， 看 网 络 能 否 成 功 地 对 它 进 
行 识 别 ， 








sseawereerecegmeaegygsgaggmgaassesm 
结果 说 明 该 组 数据 局 于 第 3 类 ， 妈 石灰岩 ， 由 此 可 见 ， 网 络 成 功 地 识 则 了 该 组 数据 ， 
国 此 本 以 说 ， 网 络 的 性 能 是 不 错 的 。 


5.2 自 组 织 特 征 了 映 射 (SOM) 神经 网 络 
及 MATLAB 实现 


自 组 织 特征 晃 碳 网 络 也 陈 为 Kohonen 网 络 ， 或 者 称 为 SelEOrganizing Feature Map 
(SOM) 网 络 ， 它 是 由 芬兰 学 者 Teuvo Kobonen 于 1981 年 提出 的 。 该 网 络 是 一 个 由 全 连接 
的 神经 元 阵列 组 成 的 无 教师 自 组 织 、 自 学 习 网 络 。Kohanen 认为 ， 处 于 空间 中 不 同 区 韦 的 
神经 元 有 不 同 的 分 工 ， 当 一 个 神经 网 络 接受 外 界 输入 模式 时 ， 将 会 分 为 不 同 的 反应 区 域 
各 区 域 对 输入 民 式 具有 不 同 的 响应 特性 。 






0 
5s.2.1 SOM 网 络 的 结构 
SOM 网 络 结构 如 图 $-2 所 示 。 
竞争 层 
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图 5-2 SOM 网 络 的 结构 


SOM 网 络 的 一 个 典型 特性 就 是 可 以 在 一 维 或 二 维 的 处 理 单 元 阵列 上 , 形成 输 人 信和 己 的 
特征 拓扑 分 布 ， 因 此 SOM 网 络 具 有 抽取 输入 信号 模式 特征 的 能 力 。SOM 网 络 一 般 只 包含 
有 一 维 阵 列 和 二 维 阵列 ， 但 也 可 以 推广 到 密 维 处 理 单元 阵列 中 去 。 下 面具 讨论 应 用 较 多 的 
一 维 阵列 。SOM 网 络 模型 由 以 下 4 个 部 分 组 成 。 

(1) 外 理 单元 阵列 。 用 于 接受 事件 输入 ， 并 且 形 成 对 这 些 信和 号 的 “判别 冰 数 ”。 
《2) 比较 选择 机 惠 。 用 于 比较 “ 浏 别 函 数 "， 并 选择 一 个 具有 最 大 函数 输出 值 的 处 理 





输入 屋 





单元 。 
3》 局 部 妃 连 作用 。 用 于 同时 激励 被 选择 的 处 理 单 元 及 其 最 邻近 的 处 理 单元 。 

(4) 自 适 应 过 程 . 用 于 修正 被 激励 的 处 理 单元 的 参数 ， 以 增加 其 对 应 于 特定 输入 “ 狮 
别 函 数 ” 的 输出 值 。 


假定 网 络 输 入 为 刁 < R， 输 出 神经 元 ; 与 输入 单元 的 连接 权 值 W < RR ， 风 输出 神经 元 
i 的 输出 o 为 ， 


如 一 卫 于 


『 





网 络 实际 具有 响应 的 输出 单元 &， 该 神经 元 的 确定 是 通过 “ 启 者 通 吃 ” 的 竞争 机 制 得 
到 的 ， 其 输出 为 : 


心 =Imax{o:} 
以 上 两 式 可 修正 为 : 
2 -92 一 人 | 多 = win 作 = max [oj 一 
ES) 和 1 : 
其 中 ,tp 为 输出 神经 元 ; 和 输入 神经 元 j 之 问 的 连接 权 值 。x 为 给 入 神经 元 ;的 钵 出 。 G (7 
为 非 线 性 函数 ， 旭 





2 为 一 个 很 小 的 正 数 ， 天 为 系数 ， 它 与 权 值 及 横向 连接 有 关 。 史 为 与 处 理 单元 让 相关 


的 处 理 单元 集合 ，o, 称 为 评 动 阔 值 函数 ， 





5.2.2 SOM 网 络 学 习 算 法 


SOM 网 络 的 学 习 算法 过 程 为 : 
1) 初始 化 。 对 六 个 输入 神经 元 到 输出 神经 元 的 连接 权 值 赋予 较 小 的 权 值 。 选 取 输 


出 神经 元 7 个 “邻接 神经 元 ”的 集合 3。 其 中 ，3 (9 表示 时 刻 != 0 的 神经 元 7 的 “邻接 


神经 元 ”的 集合 ，3 颁 表 示 时 刻 上 的 的 “邻接 神经 元 ”的 集合 。 区 域 8, (中 随 着 时 间 的 增长 





而 不 断 缩 小 。 
(2 提供 新 的 输入 模式 开 。 


3》 计算 欧 氏 距 离 4 ， 即 输入 样本 与 每 个 输出 神经 元 7 之 间 的 距离 ; 





d 了 才 苇 - 克 ,| >[x (0)- 几 人] 


并 计算 出 一 个 具有 最 小 距离 的 神经 元 产 ， 即 确定 出 某 个 单元 志 使 得 对 于 任意 的 六 都 有 
4 =min(dh 

44) 给 出 一 个 周围 的 邻 域 3 人 1) 。 

(5)》 按照 下 式 修正 输出 神经 元 广 及 其 “邻接 神经 元 ”的 权 值 : 


+]= we (+ 到 (同人 ] 
其 中 ， 作 为 一 个 增益 项 ， 并 随时 间 变 化 逐渐 下 降 到 零 ，-- 般 取 


(= :或 OO=02| 10 





170 
0 


和 


到 届 古训 局 二 本 





[6 计算 输出 总 ， 
ou=ylminlx -本 咱 
其 中 ， 了 (一 般 为 小 1 函数 或 其 他 非 线性 函 雪 ， 
(7 了) 提供 新 的 学 习 样 本 来 重复 上 述 学 习 过 程 。 
5.2.3 基于 SOM 网 络 的 土壤 分 类 


主 博 营业 是 主 壤 科学 的 基 吨 ， 也 是 土壤 科学 发 展 术 平 的 综合 指标 。 焉 同时 期 所 拟定 的 
土 坊 分析 村 旦 反 融 了 访 时 期 人 们 对 士 坊 的 认识 水平 和 二 壤 来 身 的 盟 展 阶段 。 目 前 ， 土壤 分 
费 研 究 已 经由 单 二 的 性 雯 描述 向 指标 化 和 数量 化 方向 发 展 ， 模 贿 阳 类 分 析 由 于 为 土壤 分 业 
提供 了 科学 的 方法 而 得 到 广 弃 的 应 用 。 但 是 在 杆 贿 聚 类 分 析 中 ， 在 进行 数据 标定 时 《建立 
模糊 相似 矩阵 ) 不 同人 可 以 采用 不 同 的 方法 ， 例 如 相关 际 数 法 、 臣 离 法 等 。 因 此 建立 的 覃 
灾 相 伺 矩 昧 是 乎 同 的 ， 量 司 的 分 业 站 时 也 存在 局 部 蓝 异 。 这 蔽 明 十 同 的 标定 方法 所 利用 ， 
提取 的 土壤 样 杰 间 的 信息 乎 同 ， 就 和合 导 晴 到 最 后 的 站 果 。 另 外 ， 在 最 后 确定 最 佳 分 类 铺 果 
即 量 佳 冰 值 时 ， 通 党 通过 束 学 这 计 方 继 ， 构 造 统计 重 素 确定 量 佳 闪 值 ， 但 该 痢 值 是 否 合 适 
还 需要 要 据 实际 癌 昕 做 进一步 分 析 与 判断 。 这 些 者 说 明基 种 分 类 方 法 仅仅 提供 一 种 工具 和 
思路 ， 对 于 具 性 问题 还 要 结 兰 实际 情况 才能 做 出 正确 的 判 断 。 基 于 这 个 间 题 ， 这 里 登 试 利 
用 SOM 网 阁 进 行 土壤 分 类 ，SOM 同 阁 是 一 种 具有 又 党 功能 的 神经 网 络 ， 它 为 土壤 分 业 提 
供 一 种 新 的 思路 与 方法 。 

1， 陪 效 样本 设计 

从 密 料 中 得 到 了 我 国 基 地 区 的 上 企 士 形 樟 本 ， 伍 个 样本 用 了 个 理化 指标 表示 其 性 状 ， 
原 娩 蚂 握 如 圳 2 所 示 。， 确 定 网 络 的 输 六 模式 为 : 


中 =| 民 ,并 有 ) 天 =il2…10，me= 了 
即 一 共有 40 蛆 土壤 样本 向 量 ， 每 个 样本 中 也 揪 了 个 元 素 。 
人 


天 二 呈 国 仿古 1 二 而 1 号 ) 


了 
可 屋 绍 闪 演化 蝇 寺 

3 “区 中 天 总 在 | 
[aaaspt | au 
有 
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民国 了 辣 于 生 = 和 


和 TEAEETT 本 下- ET 
| 耳 必 和 考 站 划 妇 邮 上 | big | na | 70 | 训 | 8 |3 | im 
2 网 络 设计 


站 en 2 汪 放 。 代码 为 : 








其 中 ， P 为 输入 向 量 ; 由 末 5 和 出 。 ar 
值 ， 喇 可 表示 创建 网 络 的 竞争 层 为 5x4 的 后 构 ， 网 络 结构 是 可 以 调整 的 ， 此 处 的 样本 量 和 下 
是 很 大 ， 所 以 选择 这 样 的 竞争 屁 是 人 台 适 的 。 

然后 利用 函数 tmain 和 佑 真 函数 sim 对 网 络 进行 负 练 并 仿真 。 由 于 训练 步 数 的 大 小 影响 
全 的 100 和 1000， 分 别 观 察 其 分 类 性 能 。 _ 





聚 迷 结果 如 表 5.3 所 示 。 对 结果 进行 认 析 可 得 ,， 当 训练 步 萄 为 1 时 ,样本 序号 为 1. 3。 
s， 昌 和 9 的 纯 为 一 类 ， 与 表 5 进行 对 比 ， 可 知 这 地 组 样本 者 是 属于 薄 层 的 轩 士 ， 翌 本 序 
导 为 2 让 吉 和 的 分 为 一 类 ， 而 这 些 都 性 于 厚 层 的 黑土 ;而 序 叶 为 了 的 豆 据 单 束 成 为 一 
类 ， 它 是 中 层 的 黑土 。 由 此 可 见 ， 问 阁 已 经 对 样本 进行 了 韦 步 的 分 类 ， 这 种 分 类 虽 朴 准确 
但 在 后 情 确 。 

当 训练 步 灼 为 100 屠 ， 序 号 为 1 和 9 的 样本 分 为 一 类 ， 序 号 为 了 站 和 下 的 样本 分 为 一 
潜 ， 序 昌 为 3 和 5 的 样 分 为 一 类 ， 序 号 为 了 的 样 幸 为 一 糯 ， 序 号 为 & 的 样本 为 一 类 ， 序 
丑 为 10 的 样本 分 克 一 类 ， 这 避 分 类 站 果 更 加 细 化 了 ， 

当 调 练 步 数 尖 1000 时 叔 一 个 样本 示 撤 划分 为 一 类 .这 和 实际 情况 也 是 唤 合 的 。 此 时 
嫩 果 再 提高 训练 步 败 ， 已 经 宙 有 室 际 意 闵 了 ， 


家: 入 光 革 昌 、 





本 例 前 WEATLA 百 代码 为 ; 





524 基于 SOM 网 络 的 人 喇 分 类 


从 口 分 类 是 大 口 统计 中 的 一 个 重要 指标 。 由 于 各 方面 的 原因 ， 我 国人 口 的 出 生 率 硅 性 
别 上 的 差异 比较 大 ， 具 性 表现 在 同一 个 时 期 出 生 的 人 人 口中， 一般 男 的 占 多 数 ， 大 大 超过 了 
正常 的 比例 。 因 此 ， 正 确 地 进行 人 口 分 类 是 制定 人 台 理 的 从 口 政策 的 基础 。 

1. 样本 设计 

通过 分 析 历 中 责 料 ， 得 到 了 在 1999 年 12 月 共 20 个 地 区 的 人 口 出 生 比例 情况 ， 如 雪 
于 4 所 堵 。 

囊 54 类 口 出 生化 例 -本 

| ws | oamy | oo | www | ua | ud | us | nsos | one | nr 

将 上 玫 中 的 数据 作为 同 络 的 往 六 样本 P，P 是 一 个 二 维 随机 商量 ， 官 的 分 布 情况 如 图 
53 所 示 。 
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图 53 梓 丰 笋 据 的 分 布 
2 网 络 创 建 


利用 12 个 村 经 元 的 SOM 网 络 对 输入 向 量 P 进行 分 类 。 该 网 络 竞争 层 神经 元 的 组 织 结 
构 为 3x4， 通 过 距离 函数 linkdist 来 计算 距离 。 网 络 创建 代码 如 下 ; 






对 于 该 网 络 ， 查 看 它 的 韧 始 权 值 ; 


运行 结果 如 图 5.4 所 示 ， 图 中 每 一 点 表示 一 个 神经 元 ， 由 于 网 络 的 初始 权 值 都 披 设 置 
为 Qs， 所 以 这 些 点 在 图 中 是 重 全 的， 看 起 来 就 像 一 个 点 ， 实 际 上 是 12 个 点 。 


EN 辣 EC 
由 可 - 这 
时 
对 
罩 - 
4 昌 [1 1 
的 号 中 


转 5-# 网 阁 初 大 根 值 的 个 布 
在 而 专 行 窗口 中 查看 wl_init 的 值 ， 可 得 : 





了 讨 





3. 网 络 训 蝶 与 测 诸 
接 下 率 利 用 训 姑 函 表 rain 对 网 络 进 行 训 练 ， 设 虫 公 过 训练 的 网络 可 对 输入 向量 进行 正 
确 分 类 。 网 阁 训 练 步 数 对 于 网 效 性 能 的 感 响 出 较 坟 ， 押 以 这 里 将 步 数 设置 为 100、300 和 
500， 并 分 别 观 察 其 桶 值 分 布 。 
步 攻 为 100 时 前 权 值 分 布 如 轿 外 $ 所 示 。 





有 We 
人 一 一 者 一 -ee 
| | 
蝇 4 二 
到 | 
再 
瑟 相 时 本 
生 u 
1 
恒 
李 呈 本 
已 量 ， 
日 
0 0 
请 i1 
图 55 到 什 分布 “训练 步 琢 ，1001 


步 数 为 300 时 的 权 什 耸 布 如 图 56 所 示 。 








ES 刘 SNMATLAB:7512117 


癌症 0 向 
机 宙 时 


围 节 6 术 伸 分布 【 训 晾 步 融 ，3001 
步 娄 为 S00 时 的 权 值 分 布 如 图 $-7 所 示 。 





、 册 靖 关 曙 
和 
二 
瑟 胜 
志明 
好 而 
人 画 
下 吕 . 
意 吕 ai 
下 呈 | 
总 .本 :- 
忆 乾 
有 到 下 号 丰 员 和 
击 遇 


峰 7 板 值 芝 布 出 谍 步 感 00) 


从 图 邱 5，56 和 57 可 以 看 出 ， 训 张 了 100 步 以 后 ， 神 经 元 就 开始 和 组织 地 分 布 了 ， 
每 个 神经 元 可 以 区 分 不 同 的 样本 。 随 着 调 练 步 数 的 增多 ， 神 经 元 的 分 布 更 加 合理， 但 是 ， 
当 训 练 次 数 达 刘 一 定 值 后 ， 权 值 分 布 的 改变 未 不 很 明 显 了 。， 比 如 ， 训 练 300 步 和 训 能 500 
步 后 的 梳 值 分 布 就 比较 相似 。 

同 络 训 畸 结束 后 ， 权 值 也 就 固定 了 。 以 后 每 输入 一 个 值 ， 网 络 就 会 自动 地 对 其 进行 分 
惕 。 困 此 ， 利 用 这 一 点 对 网 络 进行 珊 试 。 首 先 ， 利 用 仿真 函数 sim 来 观 闻 网 络 对 样本 数据 
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atv0 坟 全 同 二 pk 全 详 和 枯 全 名 圾 二 E 


的 分 类 结果 。 


结果 为 ; 






对 结果 进行 分 析 ， 如 表 5.5 所 示 。 
惠 5.5 “要 旧 周 果 





绪 果 为 ys11。 由 此 可 见 ， 此 时 注 发 了 网 络 的 第 11 个 神经 元 ， 所 以 属于 第 4 类 。 通 
过 直接 对 比 数据 可 知 ，p 确实 与 样本 中 的 第 4 组 .第 了 组 和 第 10 组 数据 非 蜗 接近 ， 
本 例 的 完整 MATLAB 代码 为， 
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自 适应 共振 理论 英文 全 称 为 Adaptive Resonance Theory, 简称 ART, 它 是 由 $.Grossherg 
和 ACarpentent 等 人 于 1986 年 提出 的 。Grossberg 的 研究 工作 主要 是 采用 数学 方法 描述 人 
的 心理 和 认 知 狂 动 ， 致 力 于 为 人 类 的 心理 和 认 知 活动 建立 一 个 统一 的 数学 模型 。 以 其 思想 
基础 提出 的 ART 模型 成 功 地 解决 了 神经 网 络 学 习 中 的 稳定 性 〈 固 定 某 一 分 类 集 ) 和 可 塑 恬 

《调整 阿 络 固有 参数 的 学 习 状 态 ) 的 关系 问题 。 

ART 是 以 认 估 和 行为 模式 为 基础 的 一 种 无 教师 、 撩 量 篆 类 和 竞争 学 习 的 算法 。 在 效 学 
上 ， 点 RT 为 非 线性 微分 方程 的 形式 ， 在 网 络 结构 上 ，ART 是 全 反馈 结构 ， 且 各 层 结 点 具有 
不 癌 的 性 岳 。 

ART 网 络 共 有 3 种 类 型 ， ART-1、ART-2 和 ART-3。 这 里 主要 介绍 ART-1 型 网 络 。 


5.3.] ART-! 型 网 络 模型 描述 


ART-1 型 网 络 结构 如 图 S-8 所 示 。 由 图 可 见 ， 网 络 分 为 输入 和 输出 两 屋 ， 一 般 根据 各 
居所 有 的 功能 特征 还 称 输入 层 为 比较 层 ， 输 出 层 为 识别 层 。 和 其 他 阶层 型 网 络 的 显著 区 别 
是 ，ATR-1 型 网 络 不 仅 具 有 从 输入 层 到 输出 层 的 前 馈 连 接 权 ， 还 有 从 输出 层 到 输入 层 的 反 
馈 连 接 权 。 





输出 层 5 识 别 屋 ) 





前 征 连 接 权 





和 ta 
图 5$-8 ART-! 型 网 络 结构 

假定 网 络 和 输入 层 有 关 个 神经 元 , 输出 县 有 M 个 神经 元 , 二 值 输入 模式 和 输出 向 量 分 别 

为 各 = (da 的》 和 及 = (下 , 芒 ，8 )， 其 中 丰 =12…… 疡 ， 为 输入 学 习 模 式 的 数 甘 。 


前 饶 连 接 权 和 反馈 连接 权 分 别 为 w 和 下 ， 了 = 上 2…, 邓 。 


ART-1 网 络 的 学 习 及 工作 过 程 ， 是 通过 反复 地 将 输入 学 习 模 式 由 输入 层 向 输出 层 目 下 
而 上 地 识别 、 由 输出 层 向 输入 层 自 上 而 下 地 比较 来 实现 的 。 当 这 种 家 下 而 上 的 识别 和 自 工 
而 下 的 比较 达到 共振 ， 即 输入 向 量 可 以 正确 反映 输入 学 习 模 式 的 分 类 ， 且 网 络 原 有 记忆 没 
有 受到 不 良 影 响 时 ， 网 络 对 一 个 输入 学 习 模式 的 记忆 和 分 类 就 算 完成 。 网 络 的 学 习 和 工作 
过 程 可 以 分 为 初始 化 阶段 、 识 别 阶 段 、 比 较 阶 段 和 探寻 阶段 ， 下 面 将 详细 介绍 网 络 的 学 习 
及 工作 过 程 。 
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:让 生生 太 入 机 和 汪 和 和 半生 直人 全 的 有 于 和 
5.3.2 ART-1 网 络 的 学 导 玫 工作 过 程 
&RT-1 和 用 汪 本 民工 作 区 和 因为 因 下 和 和， 


(1)》 初始 化 。 令 (0)=1， WO0)= ， i=12…,N，j=1L2…M。 其 中 ， 警 


戒 参 数 0< p 所 1。 
2) 将 输入 模式 少 = (of dt, ;ax ) 提 供给 网 络 的 输入 层 。 
(3) 计算 输出 层 各 个 神经 死 的 输入 加权 和 ; 
如 
， 袜 4 
i=1 


(4) 选择 输入 模式 的 最 佳 分 类 结 时 ， 





令 神 经 元 g 的 输出 为 1。 
(5) 计算 以 下 3 式 ， 并 进行 判断 : 


人 [= 之 季 
到 -= 六 ad | 


本 4 、 
| 
如 果 最 后 一 式 成 立 ， 则 转 入 步骤 47)， 否 则 转 入 步骤 《6)， 
46) 取消 识别 结果 ， 将 输出 层 神 经 元 g 的 输出 值 复位 为 0， 并 将 这 一 神经 元 排除 在 下 
次 识别 的 范 轩 之 外 ， 返 回 步骤 (4)。 当 所 有 已 利用 过 的 神经 元 都 无 法 满足 步骤 (5) 中 的 最 
后 一 式 时 ， 则 选择 - 个 新 的 神经 元 作为 分 类 结果 ， 并 进入 步骤 〈7)。 
(?) 接受 识别 结果 ， 并 按照 下 式 调整 连接 权 信 ; 
名 4 
0.5+ 和 让 (oa 
二 = 人 ja 





ws 性 二 一 


其 路 ，1i =12,. 
《8 ) 人 《各 ) ) 中 复位 的 所 有 神经 元 重新 加 入 识别 范围 中 ， 返回 步骤 (2 对 下 个 


模式 进行 识别 。 
讯 论 网 络 学 习 还 是 回想 ， 孝 使 用 以 上 的 规则 。 只 不 过 在 网 络 回想 时 ， 只 对 那些 与 未 使 
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人 怀 演艺 友 呈 六 
用 过 的 输出 神经 元 有 关 的 连接 权 值 向 量 w 和 鼎 才 进行 初始 化 .其 他 连接 权 值 向 量 保 持 网 络 


学 习 后 的 值 不 灾 。 当 输入 模式 是 一 个 网 络 已 记忆 的 学 习 模 式 时 ， 不 需 再 进行 网 络 权 值 的 调整 ， 
这 是 因为 当 输 入 模式 和 网 络 记 忆 的 学 习 模式 完全 相等 ， 再 按照 权 值 调整 公式 进行 调整 时 ， 网 络 
连接 权 信 不 会 发 生 任 何 变化 .而 当 输 入 模式 与 网 络 记忆 模式 存在 一 定 差异 时 , 按照 权 值 调整 公 
式 进 行 调整 ， 将 会 影响 网 络 遍 有 模式 的 记忆 效果 。 但 是 如 果 输 入 的 是 一 个 全 新 的 模式 ， 需 要 利 
用 网 络 对 其 另 加 记忆 时 ， 则 必须 按照 权 值 调整 公式 对 网 络 连接 权 值 进行 调整 。 

尽管 ART-1 网 络 具 有 许多 其 他 网 络 所 没有 的 优点 ， 但 是 它 仅 以 输出 层 中 其 个 神经 元 代 
天 分 类 结果 ， 而 不 是 像 Hopfield 网 络 那样 ,把 分 类 结果 分 散在 各 个 神经 元 上 来 表示 。 所 以 ， 
一 且 输 出 屋 中 某 个 输出 神经 元 损坏 ， 则 会 导致 该 神经 元 所 代表 类 别 的 模式 信息 全 部 消失 。 
这 是 ART-1 网 络 一 个 很 大 的 答 陷 。 

ART-2 型 网 络 与 ART-1 型 的 主要 区 别 是 ，ART-2 型 网 络 以 模拟 量 作为 输入 模式 ， 同 时 
在 算法 上 做 了 一 些 相应 的 改进 ， 并 采用 慢 速 学 习 方式 ， 其 抗 干 殷 能 力 大 大 增强 。，ART-3 型 
网 络 是 由 多 个 ART-1 型 网 络 组 成 的 复合 阶层 型 网 络 。 


5.3.3 ART-1 网 络 的 应 用 实例 

















MATLAB 神经 网 络 工具 箱 没 有 为 ART 型 网 络 提供 专门 的 国 数 ， 因 此 ， 利 用 现 有 的 神 
经 区 络 工具 箱 是 无 法 实现 ART-1 网 络 的。 但 是 ， 我 们 可 以 借助 于 MATLAB 强大 的 数学 计 
算 功 能 来 实现 ART-! 网 络 的 训练 和 联想 记忆 功能 。 

现 举 一 个 简单 的 例子 来 演示 利用 MATILAB 实现 ART-1 网 络 的 过 程 。 如 图 $-9 所 示 ， 
设 ART-1 网 络 有 S 个 输入 神经 元 和 20 个 输出 神经 元 。 现 有 两 组 输入 模式 4I=(110,0.0) 和 
42=(1.0.0.0.10)， 要 求 利 用 这 西 个 模式 来 训练 网 络 。 根 据 上 一 节 中 的 训练 过 程 ， 该 网 络 的 训 
练 步 又 为 下 面 几 步 。 

(1) 初始 化 。 令 册 = GWY+L) =16， 必 =1， 其 中 1=12…5，7 =12…,20， 








令 P=0.8. 

《2) 将 输入 模式 41 提供 给 网 络 的 输入 层 。 

(3) 求 获胜 的 神经 元 。 因 为 在 网 络 的 初始 状态 下 ， 所 有 的 前 馈 连 接 权 wz 均 取 相等 的 
权 值 16， 所 以 各 输入 神经 元 均 共有 相同 的 输入 加 权 和 s%。 这 是 可 取 任 一 个 神经 元 作为 4i 
的 分 类 代表 ， 如 第 1 个 ， 令 其 输出 值 为 1。 
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浊音 和 5 ivo 神 & 导 二 aNkIL 直 区 必 Ai 人 


【4) 计算 下 式 ， 
Mi=a =>， 14|= 之 6 3 


[9 计算 上 人 -1>08， 接受 这 次 识别 结果 。 


恒 ) 调整 权 章 
本 = Way WwWisj= 0404.00.0) 
看 三 (vanani]j= 人 00.0) 


至 此 ， 而 已 经 杆 记 忆 在 网 阁 中 了 。 
《71 将 恰 入 模式 4z 提 供给 网 络 的 输入 层 ,。 


(8》 求 著 胜 神 皮 元 ，5i=0 4，5=116，0= =oaiF15， 由 于 己 记 下 三 庆 二 上， 所 以 
取 神 坚 元 ! 作为 歼 驻 神经 元 ， 但 这 显然 与 4 的 识别 结果 相 永 盾 。 叉 因为 
[< 
所 以 拒 疙 这 泡 识 别 早 果 ， 重 新 进行 识别 。 由 于 品 = 前 三 …=2 三 Th6， 故 可 从 中 任 选 一 
个 神经 元 作为 4z 的 分 类 结果 ， 如 神经 元 如 ， 
597 调 尾 权 慎 


=(nas wa Wooywaj= (040000.4) 
页 = 人 base)=(kh000 


至 此 ，a 也 记忆 在 网 络 中 了 - 
按照 上 述 步 参 ， 可 以 编写 以 下 MATLAB 代码 : 








下 


aged 六 二 钴 洒 作 各 


可 见 ， 第 1 个 和 第 20 个 神经 元 的 输出 均 为 1， 表示 它们 记忆 了 蛤 入 模式- 


5.4 学 习 拓 量 量化 〈LVQ) 神经 网 络 
及 MATLAB 实现 


学 习 舌 量 量化 的 英 误 全 称 是 Dearming Vector Quantizatinn， 简称 为 LVO。LVQ 算法 是 在 
有 教 珊 状态 下 对 竞争 层 进行 训练 的 一 种 学 习 算 法 。 它 是 从 Kohonen 竞争 算法 演化 而 来 的 。 
LV 神 皮 网 络 在 模式 识别 和 懂 化 策 咸 有 着 广 应 的 应 用 。 


5.4.1 LVQ 网 络 的 结构 


LVQ 网 络 结构 如 图 5-10 所 示 。 一 个 学 习 矢 量 量 化 【LVQ) 网 络 由 三 屋 挤 经 元 组 成 ， 

即 输入 层 、 隐 言 屋 和 输出 屋 。 该 网 络 在 输入 层 与 陷 音 屋 间 为 完全 连接 ， 而 在 隐 舍 屋 与 输出 
层 间 为 部 分 连 苇 ， 旺 个 给 出 神经 元 与 隐 舍 神经 元 的 不 同 组 相连 接 。 陷 告 屋 和 输出 神经 元 之 
间 的 连 技 权 值 固 定 为 1， 输入 屋 和 隐 舍 神经 元 问 的 连接 权 值 建立 参考 矢量 的 分 量 【 对 短 沾 
陷 理 神经 元 指定 一 个 参考 矢量 )。 在 网 阁 训练 过 程 中 , 这 些 权 值 被 修改 。 隐 得 神经 元 【又 称 
为 Kohonen 神经 元 ) 和 输出 神经 元 都 具有 二 进 制 旺 出 值 ， 当 某 个 输入 模式 枝 送 至 网络 时 ， 

拓 考 关 量 最 接近 输入 模式 的 阶 河 神经 元 因 获 得 激发 而 赢得 竞争 ， 因 而 多 许 它 产生 一 个 =1r"。 
其 他 隐 诗 杭 经 元 都 被 才 产 生 “W"。 与 包 人 洁 获 胜 神 经 元 的 陷 洛 神经 元 组 相连 接 的 输出 神经 元 
也 发 出 “1"， 而 其 他 输出 神经 元 均 发 出 “0"。 产 生 “1"” 的 输出 神经 元 给 出 输 六 横 起 的 类 ， 
每 个 输出 神经 元 被 更 示 为 布 同 的 类 。 





图 对 t 贡 【VD 网络 由 构 








上 各 六 
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和 
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5.42 ITVQ 网 络 的 学 习 规 则 


在 介绍 网 络 学 习 规 则 之 前 ， 首 先 定义 一 个 变量 。 盆 定 网 络 和 输入 层 的 输入 向 量 为 
X ={ 人 zx )， 其 中 ，M 为 输入 层 神经 元 的 数目 ， 输 入 层 和 竞争 层 之 间 的 连接 权 值 抵 


5 
-” 了 得 壹 入 。 YE 








阵 为 下 := (0 册 一 (as]。 nz 中 ， ET2DP，=12…47， 


表示 输入 层 第 ;个 神经 元 和 第 个 神经 元 之 间 的 连接 权 值 ，P 为 竞争 层 神 经 元 的 数目 ， 竞 争 
层 的 输出 向 晤 为 V= (wwmy…,ww) ， 竞 争 层 与 输出 层 神经 元 之 间 的 连接 权 值 矩阵 为 


三” = 人 0 其 中 避 ? = (ww 人 )。 WO 二 2 = 
表示 资 争 层 第 上 个 神经 元 与 输出 层 第 * 个 神经 元 之 间 的 连接 权 值 ，A 为 输出 层 神经 元 的 数 
目 。 竞 争 层 的 每 个 神经 元 通过 学 习 原 型 问 量 ， 并 对 输入 空间 进行 分 类 。 将 竞争 层 学 习 得 到 
的 类 称 为 子 类 ， 将 输出 是 学 习 得 到 的 类 称 为 日 标 类 。 

LVQ 神经 网 络 的 学 习 规则 结合 了 竞争 学 习 和 有 教师 学 习 的 规则 ， 即 需要 一 组 正确 网 络 
行为 的 例子 来 训练 该 网 络 。 假 定 有 以 下 的 训练 模式 : 


人 Te 
其 中 ， 每 个 目标 输出 向 量 上 C=12…,@) 有 且 只 有 一 个 分 量 为 1， 其 他 分 量 全 都 为 0。 





为 了 使 得 学 习 过 程 可 以 进行 上 上 去， 通常 把 第 一 层 的 每 个 神经 元 指定 给 一 个 输出 神经 元 ， 这 
样 就 可 以 定 习 矩阵 琴 ?。 王 ?的 列表 示 子 类 ， 行 表示 类 。 琴 :的 每 一 列 公有 一 个 1 出 现 的 行 ， 
吉明 这 个 子 类 属于 该 行 表示 的 类 ， 即 
wz: _ 有 骨 有 且 仅 有 re 大 
” |10 如 果 rEK 


厂 ? 一 旦 定义 好 就 不 再 改变 , 神经 网 络 的 学 习 尾 通过 改进 了 的 Kohonen 规则 使 页 ` 改变 
来 进行 的 ， 即 在 每 次 迁 代 过 程 中 ， 将 一 个 输入 向 量 厌 吉 供 给 网 络 ， 并 且 通 过 竞争 层 计算 每 
个 原型 向 量 与 天 之 河 的 距离 ， 与 对 的 距离 最 近 的 神经 元 六 获得 竞争 胜利 ， 输 出 了 的 第 志 个 


元 素 值 设 定 为 1， 通过 下 式 可 计算 得 到 和 输出 向 量 了 的 值 ， 
了 = 全 守 
显而易见 ，7 中 的 每 个 分 量 也 只 有 一 个 非 零 元 素 。 假 定 其 序号 为 已 ， 这 样 一 来 ， 就 表 
明天 是 指定 给 站 类 的 。 
下 面 对 分 类 结果 进行 分 析 。 第 一 ， 如 果 分 类 正确 ， 即 若 y. = 六 =1， 则 获胜 的 陷 人 洛神 





二 


避 训 G 全 区 的 太 友 上 接 昌 下 起 修正 竞争 屋 权 值 向 组， 
PC+= 产 (+[Pf+ 了 =- 才 人 (9 


第 二 ， 如 果 分 类 不 正确 ， 即 奢 了 ,=1， 而 1 = 时 ， 妻 示 错 误 的 隐 舍 层 神经 元 竞争 获胜， 
则 移动 该 神经 元 的 权 值 远离 X， 收 改 竟 争 层 析 值 向 量 : 
站 + 下 = 产 (=q[PU+D- 产 人 


其 中 ，TE TO) 为 比例 系数 ， 在 调整 权 值 给 阵 过 程 中 反 瞎 调整 速率 。 六 (站 表示 竞争 层 中 


第 也 个 神经 元 在 ， 时 刻 的 权 值 。 既 过 这样 的 处 理 后 ， 每 个 昼 经 元 移 向 那些 落 信 形成 子 类 的 
业 中 的 向 量 ， 而 远离 邪 些 藩 六 其 他 类 中 的 向 量 。 


5.4.3 基于 LVQ 网 络 的 模式 识别 


神 皮 浆 晓 通过 嫩 技 输 入 /输出 数据 之 问 的 关系 ， 来 实现 特征 提取 和 访 计 分 类 等 模式 识别 
任务 。 痉 过 几 十 年 的 发 展 ， 神 弃 网 络 已 经 前 定 了 在 模式 识别 领域 中 不 可 或 缺 的 位 置 。 在 模 
起 识别 的 应用 中 ， 单 屋 厦 知 占 是 能 一 和 歼 通 近 量 性 连续 函数 空间 最 简单 的 起 坚 网 络 ， 但 是 它 
具有 其 国有 的 局 限 性 ， 即 对 非 刻 性 样本 空间 不 可 和 分。BP 网 络 是 一 种 应 用 地 为 卓志 的 网 络 ， 
其 缺点 在 于 采用 了 基于 梯 诬 下 降 的 非 线性 俩 化 策略 ， 有 可 能 陷 信 局 部 量 小 问题 ， 不 能 保证 
隶 出 全 局 量 小 值 。 其 他 一 些 优 化 策略 类 站 传 算 法 、 模 拟 退 兴 算 祛 等 ， 昌 然 可 以 求 得 全 局 最 
水 ， 但 是 计算 量 福 天， 有 了 峙 候 会 出 现 效率 问题 。 这 里 党 坛 利用 EVA 网 络 束 实现 锰 式 识别 ， 
LVGQ 网 络 的 惕 点 二 不 需要 将 输入 向 量 进行 归 一 化 ， 正 交 化 ， 只 需要 直接 计算 输 六 向 量 与 况 
争 屋 之 间 的 距离 ， 从 而 实现 模式 识别 ， 因 此 简单 易 行 。 

下 面 络 出 一 组 输入 向 量 ， 贡 计 一 个 LVO 同 阁 ,根据 冶 定 的 目标 ， 将 输入 向 量 进行 由 式 
识别 。 

1， 输 向量 的 目标 商量 的 设计 
放 输 入 为 一 个 二 堆 贞 最， 一 共有 12 个 点 。 





这 些 样本 的 类 别 为 





这 表明 , 前 3 组 样本 和 后 3 组 样本 属于 第 一 类 ,中间 4 组 样本 局 于 第 二 此 。 由 此 可 见 ， 
分 类 的 依据 是 ，ra bi 属于 第 一 兴 ，a， hb 帮 是 任意 实数 ， 其 中 a 夫 0 【0.b) 属于 第 二 类 ， 
“香江 别 向 量 利用 函数 vec2ind 转换 为 网 络 可 以 使 用 的 目标 向 量 T; 





将 这 些 向 量 痊 制 在 一 张 图 上 ， 如 图 $-11 所 示 。 









有 一 ” 


人 -+ 





图 SI1 输 六 向 全 的 分 布 
函数 Pilotwec 可 以 根据 执 别 商量 的 情况 ， 利 用 乎 同 的 画 色 在 一 张 图 上 综 制 由 输入 商量 P 
中 的 相应 元 素 。 其 中 ， 两 过 的 星 号 囊 示 第 一 类 的 监 据 ， 中 间 的 星 号 表示 第 二 类 的 数据 。 
> 网 络 创 建 与 训 缔 


神经 网 络 工具 箱 中 用 于 创建 LVQ 网 络 的 函数 为 newlvg， 利 用 该 函数 创建 一 个 LVQ 网 
络 。 





其 中 ， 网 络 中 间 层 的 神 凤 元 个 数 设 定 为 5 个 。 [60 和 表示 在 中 间 尽 的 权 值 中 ， 有 厂 三 
的 列 的 第 一 行 的 值 为 1，40 吕 的 列 的 第 一 行 值 夫 1. 也 就 是 说 , 有 后 荔 的 列 属 于 第 一 车 ,4 区 
的 列 局 于 第 二 类 。 学 习 速 率 和 学 习 函 数 都 采用 默认 慎 ， 和 分 别 汶 和 01 和 Isranalvl。 

检查 该 网 络 的 初始 权 值 ， 间 将 其 本 和 入 向 节 绽 制 在 上 ， 如 图 5-t2 所 示 。 








可 见 ， 由 于 没有 经 过 训练, 网 络 的 补 始 权 值 都 为 零 所 以 , 在 图 5-12 中 重合 为 一 个 *4” 


通 避 





搂 下 来 通过 随 数 tmain 对 网 络 进行 训练 ， 训 练 步 数 设 为 100。 


训练 站 果 为 ， 


ivo 4 二 权 村 风 失 人 本 li 三 





图 于 12 同 绑 输 六 向 量 和 韦 始 栓 值 向 重 






可 见 ， 网 络 的 训练 函数 为 tainr， 经 过 3 次 训练 后 ， 网 络 误 部 达到 要 求 ， 如 图 5-13 所 
示 。 


PTFE 市 且 贞 . aa 渍 曰 





园 5 旺 ， 训 练 丫 果 


再 这 检查 网 络 竞争 层 的 权 值 ， 并 糙 其 与 输 六 向 量 绘制 在 一 张 图 上 。 如 图 514 所 示 ， 由 
图 可 见 ， 网 阁 经 过 训练 后 ， 意 争 屋 神 虹 元 的 权 值 发 生 了 变化 ， 显 然 ， 这 种 变化 有 有 山 于 对 两 





和 经 网 你 理论 与 和 让 TLA .文理 人 
对 于 调 蝶 好 的 网 络 案 说 ， 其 贺信 是 国定 的 。 对 于 每 个 输 六 值 ， 网 络 都 会 提供 相应 的 分 
类 。 国 此 ， 可 以 利用 这 一 点 对 网 绍 进 行 副 和 
设置 西 站 特定 的 点 ， 芽 别 属 于 第 一 半 和 第 三 类 。 1002) 属于 第 三 类 ，L107 局 于 第 一 
灼 。 批 申 到 用 仿 丰 函 监 sim 来 得 到 网络 的 得 出 ， 查 而 邓 行 窗口 中 输 具 以 下 代码 后 接 回 车 键 ; 
了 
yc=vEcziadly 
输出 时时 汐 ， 
可 
齐 证 
这 说 国 10 21 属于 第 三 类 ，(1 07 属于 第 一 纳 ， 和 梯 际 情况 是 相符 各 的 。 由 此 可 知 
网 络 的 分 类 性 能 是 很 好 的 ， 


| 





坚 


图 至 到 由 六 疝 量 及 训 蛙 后 的 网 始 况 争 昆 模 值 


以 上 事 栅 ， 利 用 LVQ 同 络 进 行 模式 识别 是 音 鼻 的 。 与 其 他 的 复式 识别 或 映射 方式 相 比 
较 ， 索 用 此 网 将 的 优点 在 于 ， 网 络 由 构 简 单 ， 而 且 它 只 通过 向 部 单元 的 相互 作用 ， 就 可 以 
完成 十 分 复 厅 的 分 类 处理 , 也 和 祖 窜 易 钳 设计 堪 中 香 种 和 厅 分 杖 的 设计 尘 件 收效 到 嫩 谱 上 来 ， 
国 此 ， 可 以 谤 ELwQ 网 阁 具 有 狂 好 的 模式 从 类 识别 特性 。 在 这 个 进程 中 证 计 上 做 员 和 需要 构造 
复 共 的 ， 甚至 是 建 忆 档 站 的 非 友 性 处 型 歼 。 此 让，LYG 网 络 妻 现 出 比 BP 网 络 和 和 ART 网 
典 更 强 的 容错 性 和 重 棒 性 ， 和 平易 导 致 系统 的 出 吐 。 一 般 设 计 者 只 要 使 用 已 建立 的 网 络 分 类 
总 钙 系 综 ， 输 太守 际 所 需 的 性 能 指标 就 友和 禄 到 较为 兹 意 的 误 别 时 

杰 实 例 的 MATLAB 代码 为 : 


TO 


RE 2 0824 区 02 了 12-2 1 这 中 
卫 主 卫 





aa 


ES 





5.5 对 向 传播 网 络 CCPN) 及 MATLAB 实现 


对 向 忧 播 【Counter Propagation) 网 络 ， 简 称 CPN， 是 特 Kobonen 特征 喘 射 网 络 与 
Grasshere 基本 竞争 型 网 络 相 早 台 ， 鉴 挥 各 自 特长 的 一 种 新 型 特征 轴 射 网 络 , 这 一 网 络 是 美 
国 计 算 机 专家 Rebert Hecht-Nielsen 于 1987 年 提出 的 。 这 种 网 络 被 广 生地 应用 于 模式 分 类 、 
函数 近 侧 、 统 计 分 析 和 数据 压缩 等 领域 


5.5.1 CCPN 概述 


CPN 网 绪 靖 构 如 图 51 所 示 。 由 图 可 见 ， 网 络 分 为 输入 民 。 竟 争 层 和 输出 层 。 输 六 层 
与 竟 争 屋 构成 SOM 网 络 ， 意 唐 层 与 输出 层 构 成 基本 竞争 型 网 络 。 从 整体 上 看 ， 网 络 属于 
有 教师 型 的 网 络 ， 而 由 输入 层 和 竞争 屋 构成 的 SOM 网 络 又 是 一 种 典型 的 无 教师 型 神经 网 
些 。 因 此 ， 和 这 一 网络 既 没 取 了 无 教师 型 网 络 和 分 次 灵 笑 。 算 法 简练 的 优点 ， 又 采纳 了 有 救 师 
型 网 站 车 类 精 姻 ， 准 确 的 长 幅 ， 使 两 种 在 同类 型 的 网 绍 有 机 地 结 音 起 来 。 


3 





CPN 的 基本 电炉 是 ， 由 输入 层 至 输出 层 ， 网 络 按照 SOM 学 习 规 则 产生 竞争 层 的 获胜 
神经 元 ， 并 按 这 一 规则 调整 相应 的 输入 层 至 竞争 层 的 连接 权 ， 由 竞争 层 到 输出 层 ， 网 络 按 
照 基 本 竞争 型 网 络 学 习 规 则 ， 得 到 各 输出 神经 元 的 实际 输出 值 ， 并 按照 有 教师 型 的 误差 校 
正方 法 ， 修 正 由 竞争 层 到 输出 层 的 连接 权 。 经 过 这 样 的 反复 学 习 ， 可 以 将 任意 的 输入 模式 
喘 射 为 输出 模式 。 

从 这 一 基本 思想 可 以 发 现 ， 处 于 网 络 中 间 位 置 的 竞争 层 获 胜 神 经 元 及 与 其 相关 的 连接 
权 向 量 ， 既 反映 了 输入 模式 的 统计 特性 ， 又 反映 了 输出 模式 的 统计 特性 。 因 此 ， 可 以 认为 ， 
输入 、 输 出 模式 通过 竞争 层 实现 了 相互 映射 ， 即 网 络 具 有 双向 记 亿 的 功能 。 如 果 输 入 /输出 
采用 相同 的 模式 对 网 络 进行 训练 ， 则 由 输入 模式 至 竞争 层 的 映射 可 以 认为 是 对 输入 模式 的 
压缩 ， 而 由 竞争 层 至 输出 层 的 映射 可 以 认为 是 对 输入 模式 的 复原 。 利 用 这 一 特性 ， 可 以 有 
效 地 解决 图 像 处 理 及 通信 中 的 数据 压缩 及 复原 问题 ， 并 可 得 到 较 高 的 压缩 比 。 








图 515 _CPN 网 络 结构 
接 下 来 介绍 CPN 的 学 习 及 工作 规则 。 假 定 输入 层 有 六 个 神经 元 , 严 个 连续 值 的 输入 模 
式 为 4 = [are ， 2 ,竞争 屋 有 总 个 神经 元 ,对 应 的 二 值 输出 向 量 为 及 = (下 ,下 ， 玉 ) ， 


输出 层 有 太 个 神经 元 ， 其 连续 值 的 输出 向 量 为 C; ={ct,cx…,c)， 且 标 输出 向 量 为 
Ce=(ctce vc5)， 以 上 大 =12…,P。 由 输入 层 亚 竞争 层 的 连接 权 值 向 量 为 
厂 =(wnwaoonw]，7J=12…Q :由 竞争 层 到 输出 层 的 连接 权 向 量 为 
员 =(wopaewe)，1=12… 开 :网 络 学 习 和 工作 规则 如 下 所 述 。 


(1》 初始 化 。 将 连接 权 向 量 克 ,和 TV 赋予 区 间 [0,1 内 的 随机 值 。 将 所 有 的 输入 模式 和 
进行 归 一 化 处 理 ; 





“=12， 








PT 
(2 将 第 天 个 输入 模式 4 提供 给 网 络 的 输入 层 。 


(3) 将 连接 权 值 向 量 负 ,按照 下 式 进行 归 一 化 处 理 : 


1 上 ， 
天 ， 
三 一 一 一， 1 光 1 一 1 2 
中 伸 尖 中 fi 


《4 求 竞争 层 中 每 个 神经 元 的 加 权 输 入 和 ， 
可 
= 空 or 12 
[ 


(5) 求 连接 权 向 量 见 ,中 与 本 上 离 最 近 的 向 量 全 , : 


一 2 1 
将 神经 元 8 的 输出 设 定 为 1， 其 祭 竞 争 层 神经 元 的 输出 设 定 为 0， 
0 
(6) 将 连接 权 向 重负 按照 下 式 进行 修正 ， 
t+ 了 = 人 t+ 四 -wii 人 DEL12 


其 中 ，1< 交 <1 为 学 习 率 。 
《7) 将 连接 权 向 量 印 , 重新 归 一 化 ， 妇 一 化 算法 同上 。 


(8) 按照 下 式 修 正 竞 争 层 到 输出 层 的 连接 权 向 量 员 : 
w+D= 六 (+pB(G-c =12pM，7=12 
其 中 ，1< 有 <] 为 学 习 率 。 由 步 野 (5) 可 将 上 式 简化 为 : 
(+D= 加 (+pBBi(a-cj =12 
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由 此 可 见 ， 只 需 调 整 竞争 尼 蓝 胜 神 皮 元 8 到 输出 层 神 经 元 的 连接 权 向 量 W ， 其 他 连 搂 


权 向 量 保持 不 变 ， 
(9》 隶 输 出 屋 各 神色 元 的 加 权 输 入 ， 间 将 其 作为 输出 神色 元 的 实际 输出 值 ， 


三 理 证 症 二 二 唐 
D 电 而 5 辣 络 WiDSMATLAB 7Axi 


局 瑟 六 pn， 三 二 2 同型 可 用 其 简化 汶 司 王 训 
ji 


【10) 运 回 步骤 (2)， 直 到 特 乒 个 输入 模式 全 部 提供 给 网 络 。 
(tl) 入 1=r+1， 特 辆 入 懂 式 4 重新 提供 昱 网 络 学 习 ， 直 到 :=T 。 其 中 了 为 预先 设 
定 的 学 避 总 人 获 数 ， 一 般 取 500<7 了 <T0000 。 


5.52 CPN 庶 用 实例 


这 里 举 一 店 非常 简章 面 且 和 日 常生 话 相 美的 例子 来 说 酌 CPN 网 于 的 应 用 . 再 在 希 要 创 
建 一 个 CPN 网 站 , 其 尾 荔 是 在 巨 基 一 让 人 幸 昌 峙 谍 该 完成 的 工作 量 和 此 人 当时 的 思 蛆 情况 
状 碍 的 情况 上 下， 对 此 上 星期 目下 盾 的 话 动 安排 提出 建 说 。 

按照 一 般 情况 ， 将 工作 量 苍 为 3 个 档 饮 ， 即 激 有 、 有 一 些 和 很 多 ， 所 对 诬 的 量化 值 分 
别 为 00、05 和 10， 把 思想 情绪 也 分 为 3 个 水 平 ， 即 低 ， 一 般 和 高 ， 所 对 应 的 量化 值 分别 
为 站 DO。、0s 和 和 10， 可 选择 的 活动 有 5 个 ， 即 在 家 里 看 画报 、 去 商场 购物 ， 唱 委 国 龄 步 ， 与 
出 真一 起 吃 颇 和 于 工作 ， 工作 量 和 思想 情 峙 状态 一 找 有 后 种 组 侣 ， 这 后 种 组 台 分 别 对 应 各 
自 的 坡 佳 钙 动 巡 择 ， 样 本 模式 如 旨 56 所 未。 


村 56 网络 训 练 样 车 杆 式 





把 这 扯 训 诬 样本 提供 给 网 阁 进 行 充分 学 习 后 ， 网 络 就 具有 了 一 种 “内 插 ” 功 能 ， 即 当 
网 络 输 太一 对 在 (047 区间 中 反 罗 工作 量 和 情绪 的 量化 值 后 ， 网 络 将 自动 根据 原 有 的 记忆 ， 
揽 出 对 应 于 这 对 量化 值 的 量 佳话 动 选择 ， 以 输出 槛 式 的 形式 提供 给 用 户 作为 起 系 参 数 。 

灾 际 上 ， 趟 光 CPN 网 络 具 有 这 种 ”内 择 ” 功能 ，BP 网 络 、SOM 网 阁 都 具有 这 种 功能 
从 楚 起 识别 的 角度 上 讲 ， 这 些 网 络 具 有 对 和 输入 模式 进行 分 类 的 功能 。 

可 惜 的 是 ， 对 功能 如 此 强大 的 CPN 网 络 ， 神经 网 络 工具 箱 中 竟然 没有 为 之 支持 的 函 几 
工具 . 但 是 ， 既 昂 上 一 节 中 已 经 给 出 了 有 关 CPMN 的 学 习 和 训练 算法 过 程 周 此 ， 我 们 可 昼 
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veEEEGDO EL 权 作风 和 直 本人 
利用 MATLAB 强大 的 数学 计算 功能 ， 实 现 解 正 该 问题 的 CPN 网 时 。 
根 刀 题 司 ， 庐 网络 的 输 太 屋 应 访 有 了 工 个 圳 妈 元 ， 输出 屋 应 和 语 有 3 站 村 皮 元。 为 了 更 加 
准确 地 解 坡 问题 ， 将 竟 争 层 挤 冯 元 设 转 为 18 个 。 网 娩 站 构 旭 图 有 1 所 示 。 
看 击 揽 酸 特 桓 步 莱克 工作 





工作 重 情 蛙 
围 纯 15 星 其 目下 午 话 动 安 排 瑞 篆 CPN 网 赂 
由 表 56 可 得 ， 网 络 的 输入 向 量 为 ， 









目 向 量 为 ， 


下 面 对 网 络 进行 一 个 周期 的 学 习 。 仿 输入 屋 和 意 争 层 之 间 的 连接 权 向 量 矩阵 用 W 者 
示 , 竞争 层 和 输出 屋 之 间 的 权 向 量 矩 阵 用 YV 表示 。 可 知 山 为 一 个 18X2 的 矩阵 ,，V 是 一 个 
5 区 则 的 矩阵 。 学 习 速率 设 定 为 心 1。 

(1 萎 妈 化。 利用 WMATLAB :中 的 随机 数 产生 函数 更 和 WwW， 并 赋 以 区 间 避 .之 间 的 随 
机 值 ， 代 码 为 












”由于 函数 mnds 产生 的 随机 数位 于 区 间 (-1.1) 过 间 ， 所 以 这 星 做 了 
生 的 随机 数 茎 不 影响 随机 性 能 ， 科 位 于 区 间 加 1] 中。 
对 输入 向 量 进行 归 一 化 些 理 , 


这 样 的 处 再， 性 得 产 


之 所 以 要 在 往生 申 进行 数据 判 昕 ， 是 因为 向 量 [00 1 是 无 法 归 一 化 处 理 的 ， 比 如 电 的 第 
一 组 元 素 ， 就 是 正在 用 的 这 一 组 中 。 


硬是 至 问 休 匡 iDSNMATLAB :75  : 
【27 将 第 一 个 输 六 样本 各 让 提供 结 网 阁 的 输 关 屋 梓 地 元。 
31 对 连接 要 向 量 多 直行 归 一 化 处 理 。 


《47 求 每 一 个 意 争 屋 覃 坚 元 的 如 板 输 六 而， 这 1.2.…=,18: 






怕 环 语句 中 第 虐 句 用 于 对 连接 权 向 量 W 进行 归 一 化 处 理 , 第 2 句 可 以 求 出 竞争 层 每 个 
神经 元 的 输出 结果 为 ， 













《5? 隶 连 接 权 向 量 W 中 与 W 加 距离 最 近 的 向 量 ， 由 于 输出 全 部 为 0， 所 以 可 任 选 一 个 
权 值 向 量 Wg， 这 里 选 为 18， 并 和 将 该 神经 元 的 输出 设 定 为 1。 


(6) 调整 连接 权 向 量 W18， 并 重新 将 其 归 一 化 


”输出 时 果 为 :; 





经 检验 ， 此 时 的 W18 确实 已 经 归 一 化 了 。 
(7) 调整 竞争 层 神经 元 到 和 输出 屋 神 经 元 之 间 的 连接 权 向 量 V: 

由 于 此 时 输出 屋 神 痉 元 的 输出 域 目标 向 量 是 一 致 的 ， 所 以 这 里 的 权 值 是 没有 经 过 调整 
的 。 等 到 来 了 下 一 个 模式 后 ， 权 值 才 会 直 正 得 到 调整 。 

(E) 计算 输出 层 各 神经 元 的 加 权 办 入， 并 将 其 作为 神经 元 的 实际 输出 值 ; 


第 一 组 实际 物 出 就 等 于 竞争 层 中 第 18 个 神 径 元 与 输出 层 各 神经 元 之 间 贡 整 后 的 连接 
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市 | 硬 本 画 3 ， 
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权 值 。 
193 返 同 步 厦 027， 特 铺 和 向量 中 的 各 .5 问 引 提供 和 妾 网络。 
07 友 续 学 习 ， 直 到 调和 坎 数 达 到 设 定 的 最 大 慎 。 
CPN 网 绍 训 练 结 束 后 ， 按 大 以 下 步 村 进行 网 络 回 虫 ， 
【1 特 畏 六 瑟 式 A 提供 给 网 络 的 输入 层 。 
《21 根据 下 式 求 出 意 争 层 的 装 胜 厦 经 元 咏 


下 = | wa ] 
[3 人 地 sl1， 其 余 的 输出 都 等 于 0。 按照 下 式 求 得 输出 层 各 神经 元 的 输出 ; 
吕 本 Wi 


由 此 产生 了 输出 模式 Cefeiea euj， 从 而 就 得 到 了 输入 A 的 分 类 结果 。 
”根据 以 上 步骤 ， 可 蝙 号 出 以 下 代码 用 于 网 络 训练 并 回想 ， 
















由 此 可 见 ， 经 过 1000 次 训练 后 ， 网 络 的 实际 蛤 出 和 目标 输出 就 一 致 了 ， 这 说 明 训 练 过 
程 是 有 效 的 ，_ 


Oute 是 网 络 回 租 的 输 山 ， 实 际 上 也 就 是 网 络 测试 的 时 果 ， 在 这 里 给 出 了 两 种 特定 的 组 
音 状态 ， 即 加 5 1 和 fl 中 的 组 合 ， 这 丙种 蛆 台 分 别 对 应 吃 眠 和 到 公园 散步 ， 可 见 ， 网 络 给 出 
了 正 网 的 建议 。 


哥 以 上 上策 枉 中 ， 训 转 睛 关 向 量 巨 和 男 想 档 六 量 EE 中 的 利生 者 起 [1 引 所 
南 代 , 这 是 国 为 经 过 归 一 化 处 理 后 ,已 中 丽人 小 志 来 不 一 至 的 树 表 们 呈 人 5 和 IT 1 
谈 将 一 至 了， 而 官 们 对 上 应 的 输出 阿 量 邮 并 和 一 致 ， 因 号， 特 其 用 [1 习 台 是 夫 了 
训 锅 这 种 虱 污 ， 财 结果 并 没 调 影响 。 


56 水 ” 某 


本 章 主 要 从 细 了 自 组 织 竞争 网 络 ， 特征 映射 网 络 。 自 适应 共振 网 络 ，LVQ 神经 网 络 和 
CPN 网 阁 共 五 种 自 组 织 神 经 网 络 模型 及 其 实现 过 程 ， 这 些 击 经 网 络 都 林 用 无 教师 的 学 习 方 
式 ， 在 模式 聚 类 领域 有 着 比较 三 证 的 应 用 。 神 经 网 络 工具 戎 为 自 组 肉 竞争 网 络 、 特征 映射 
网 络 和 LVQ 网 络 提 供 了 画 数 ， 利 用 这 些 网 络 进行 模式 更 类 时 需要 往 意 太 下 几 个 问题 

《1 根据 实际 问题 为 竞争 层 选择 侣 理 的 桩 经 元 个 数 ， 并 进行 悟 当 的 排列 。 

(2) 一 般 来 说 ， 训 蝶 放 数 和 训练 速率 都 会 影响 到 分 类 精度 ， 综 台 考 虑 分 类 精度 和 运算 
时 间 来 确定 合适 的 训练 葡 鉴 和 训练 速率 ， 一 般 是 首先 选择 一 个 比较 大 的 训练 次 点 和 比较 小 
的 训练 速 府 ， 不 断 观 察 分 类 站 果 ， 当 分 类 结果 下 再 发 生 改 变 时 ， 寺 座 的 调 练 次 数 就 是 介 理 
的 次 数 ， 


mc 工 





第 6 章 图 形 用 户 界 面 GUI 


所 谓 图 形 用 户 界面 [Graphical User Inierfaces，GUI7， 指 的 是 由 窗口 。 光 标 、 按 键 、 葵 
单 。 支 字 说 明 等 对 象 构成 的 一 个 用 户 界面 。 用 卢 可 以 通过 一 定 的 方法 【如 鼠标 或 键盘 ) 移 
择 ， 谨 洛 这 些 图 形 对 旬 ， 实 现 革 种 针 定 的 动能， 如 计算 ， 蛤 图 等 ， 施 骨 在 很 大 程度 上 提高 
工作 效率。 

MATLAB 神经 网 络 工具 箱 从 40 版 本 开始 所 供 @Ul 经 过 平 断 改 进 与 完善 , 目前 的 NN 
Toolbox 403 已经 非常 容易 性 用 了 ， 而 且 项 能 也 比较 强 去 。 本 章 将 重点 办 妇 使 用 最 新 版 本 
的 GUI 如 何 进行 砷 经 网 阁 的 设计 ， 和 全 析 有 应 用 。 

来 章 主要 内 容 有 ; 

硬 网 早 设计 

委 同上 赂 调 晾 与 传 起 

一点 据 操 作 


6.1 概 述 


GUI 的 设计 基 为 了 使 用 户 可 以 更 友好 和 更 方便 地 使 用 MATLAB 的 神 皮 网 络 工具 箱 。 
GUI 是 一 个 独立 的 窗口 ， 即 NetworkyData Manager 窗口 ， 如 图 61 所 示 ， 这 趟 窗 口 相 对 于 
MATLAB 命令 行 窗 口 是 独 立 的 , 但 可 以 将 GUIT 得到 的 结果 数据 导出 到 命 争 窗口 中 , 也 可 以 
将 命令 窗口 中 的 数据 导 六 到 GUI 窗口 中 ， 





图 下 1 NetaoaktyDati wanacer 备品 样本 向 量 





GUI 开始 运行 后 ， 我 们 就 可 以 创建 一 个 神经 网 络 ， 而 哩 可 以 查看 其 结构 ， 对 其 进行 仿 
真 和 训练 ， 也 可 以 输入 和 输出 数据 。 
接 下 来 ， 我 们 通过 GUI 来 创建 一 个 网 络 ， 省 示 GUI 的 使 用 流程 和 应 用 技巧 。 


6.2 了 网络 设 计 


本 节 将 通过 GUI 设计 一 个 前 向 BP 网 络 ， 对 正弦 信和 号 进行 下 近 。 该 BP 网 络 的 中 间 层 
神经 元 数目 为 10 个 , 输入 屋 神 经 元 的 传递 函数 为 $ 型 正切 硝 数 ， 中 间 层 神经 元 的 传递 男 数 
为 纯 线 性 函数 ， 网 络 训练 函数 设 定 为 trainim， 待 近似 的 原始 正弦 信和 号 为 AD)=sinf T 六 。 

下 面 开 始 创建 网 络 。 

首先 ,在 MAILAB 命令 行 窗口 中 输入 nntool 后 按 回 车 键 ， 会 出 现 如 图 6-1 所 示 的 
Network/Data Manasger 窗口 。 由 图 可 见 ， 该 窗口 可 以 分 为 3 个 部 分 ， 最 上 面 的 区 域 由 一 些 
室 白 的 文本 框 组 成 ， 中 间 和 底部 的 区 域 都 是 由 各 类 按钮 组 成 的 。 

接 下 来 ， 我 们 分 别 介绍 它们 的 作用 。 首 先 ， 我 们 需要 创建 一 个 BP 网 络 。 单 击 【New 
Network 了 接 伺 可 以 出 现 如 图 纪 2 所 示 的 窗口 . 在 Nefhwork Type 的 下 拉 框 中 选择 需要 创建 的 
BP 网 络 类 型 ， 为 Feed-forward backprop。 在 Network Name 文本 框 中 键入 所 创建 的 网 络 的 
名 称 ， 这 里 将 该 网 络 命名 为 sitmubp。 然 后 ,在 nput Ransge 文本 框 中 设 定 输入 向 量 元 素 的 最 
大 值 和 最 小 值 的 范围 ， 这 里 输入 的 范围 为 区 间 [- 奔 1。 在 它 的 左边 有 一 个 下 拉 框 ， 这 是 设 
定 输入 向 量 的 来 源 ， 这 里 我 们 取 上 默认 值 ， 不 对 其 做 出 任何 改动 。Training fonction 下 拉 框 用 
于 选择 训 练 函 数 的 类 型 ， 这 里 选择 TRAINLM。Performance function 取 默 认 值 为 MSE。 
Number of layers 用 于 设 定 网 络 的 层 数 ， 这 里 键入 2， 表明 我 们 亡 设 计 的 网 络 有 一 层 是 中 间 
屋 . 最 后 设置 网 络 各 层 的 传递 邑 数 和 神经 元 的 数目 , 在 Properties for 下 拉 框 中 选择 Layer 1， 
表示 接 下 来 将 说 置 网 络 中 间 层 的 传递 函数 和 神经 元 的 数目 . 在 Number of neurons 文本 框 中 
键入 10， 表 示 中 间 层 由 10 个 神经 元 组 成 ， 在 Transfer Function 下 拉 框 选择 传递 函数 类 型 为 
TANSIG。 然 后 在 Properties for 下 拉 框 中 选择 Layer 2， 表 示 接 下 来 对 输出 层 进 行 属性 设置 。 
在 Numberof neurons 文本 框 中 键入 1， 表 示 输 出 层 一 共有 ] 个 神经 元 ,在 Transfer Function 
下 拉 框 选择 为 PURELIN。 此 时 ， 单 击 『【View 按钮 ， 就 可 以 看 到 刚刚 设计 好 的 HP 网 络 ， 
如 图 6-3 所 示 。 单 击 【Create]】 按钮 ， 就 可 以 将 设计 好 的 网 络 simubp 保存 在 MATILAB 工作 
室 司 中 。 

让 我 们 再 回 到 NetworkyData Manager 窗口 ， 单 击 【New Pata】 按钮， 出 现 如 图 6-4 记 
示 的 窗口 。 窗 口 右 侧 的 Name 文本 框 用 于 设 定数 据 向 量 的 和 名称， 这 里 键入 p。Value 文本 框 
用 于 接收 数据 向 量 ， 数 据 向 量 可 以 是 直接 的 向 量 形式 ， 如 [1 2 3; 4 $ 6: 也 可 以 是 间接 的 
MATLAB 数学 表达 式 ， 这 里 采用 的 是 后 着 ， 为 “-1:0.05:1”。 对 话 杠 右 侧 用 于 设 定数 据 类 型 ， 
即 提供 的 数据 向 量 是 作为 网 络 的 输入 向 量 还 是 目标 向 量 等 。 这 里 的 p 表示 输入 向 量 ， 最 后 
单 击 【Create】 按钮 ， 就 为 网 络 创建 了 一 个 名 称 为 p 的 输入 向 量 。 按 照 同样 的 方式 ， 可 以 设 
定 网 络 的 目标 网 量 tsin(pi*p)。 

















和 





疾 下 3 剖 建 的 HBP 同 绍 


这 样 一 率 ， 我 们 就 通过 GUI 创建 了 一 个 名 为 imubp 的 前 向 BP 网 络 该 网 络 的 输入 向 
量 为 P， 目 标 向 量 为 t， 共 目的 是 为 了 对 一 个 标准 正 芍 信号 进行 模拟 ， 





图 在 4 麟 建 敬 六 和 目标 玛 报 阿 量 等 


动 | 


面 | 硬 二 = 


6. 3 网 帮 衣 二 下 各 证 


网络 霸 要 既 过 训练 后 才 可 以 投入 合用， 二 节 主 要 他 馈 如 何 利 用 GUI 对 网 络 进行 训练 ， 
并 通过 仿真 来 检 骆 网 络 的 应 用 情况 ， 

再 志 回 到 epworiojDaia kianapger 窗口 ,在 Metworks 误 本 框 中 选中 sjmubp。， 位 于 窗口 底 
殴 的 四 个 接 锂 [initialize ,了 【Sinnulate .了 【Train 条 【上 Ad 业 册 ..] 补 疗 活 。 单 击 [Train. 
技 钮 ， 出 现 如 图 在 5 所 示 的 对 话 框 ， 读 对 话 框 用 于 设置 网 络 自 征 应， 仿真 ， 训 练 和 和 始 化 
的 驮 数 ， 并 执行 相应 的 过 程 ， 

为 了 说 表 调 蝶 前 的 网 北平 适 于 实际 应 用 ,在 训 鳞 之 前 ,我们 首先 对 网 络 进行 一 天 仿真 。 
在 以 上 对 话 框 中 造 中 品 malate 选项 卡 ， 特 活 网 绍 仿 真 论 置 窗 所 ， 如 图 和 5 所 未 ， 

扶 旺 图 二 石 所 示 的 方 起 设置 仿真 参数 ， 将 右 侧 的 Slimmoaltion 民 esults-COutputs 文本 柜 内 容 
由 改 肯 simmukbp_ si 下 ， 用 于 表示 网 终 的 仿真 输出 。 单 击 右 下 和 角 的 【Simalate Netwcrk]】 按钮， 
可 得 出 网 绍 的 仿真 输出 simutp_sim， 特 其 输出 到 MATLAE 的 工作 空间 中 【有 具 迟 方 式 在 下 
节 申 齐 甸 》， 同 络 的 通 近 持 果 图 全 7 所 示 。 由 图 可 见 ， 训 犹 前 的 网络 对 于 信号 的 模拟 效果 
是 非 澡 凝 的 。 





图 你 5 网 阁 训 敌 对 话 相 





图 大 6 阿 绍 仿真 对 话 答 


接 下 来 设 定 训 练 参数 , 在 Training info-Training Data-Inputs 下 拉 框 中 选择 P 作为 输入 向 
量 ， 在 Training Data-Targets 下 拉 框 中 选择 上 作为 目标 向 量 ， 其 余 的 项 目下 做 改动 。 业 后 选 
中 Training Parameters 选项 卡 ， 此 选项 卡 用 于 设 定 网 络 的 训练 参数 。 这 里 特 训斥 步 娄 epoclhs 


这 
| 


1 
1 - 五 面 面 面 有 


设置 为 和 点 ， 训 绮 目 标 goal 设置 流入 0L， 共 余 的 均 取 默认 值 ， 徊 图 69 所 示 。 





天 是 ED 0 


图 在 7 训 痢 前 的 网 络 通 近 时 时 





图 下 8 调 蝶 大 娄 设 证 


此 外 ， 驮 数 设 定 页 面 中 还 有 一 个 怠 ptional 本 而 选项 卡 ， 访 选项 卡 主 要 用 于 设 定 确认 向 
量 和 术 驻 向 量 ， 幸 例 不 需要 语 定 这 些 秦 糙 。 

单 击 在下 前 的 【Train Network】〗 技 钮 ， 开 始 训练 网 络 。 训 练 结果 如 图 台 9 所 示 ， 由 图 
可 见 ， 网 络 的 训练 过 程 收盘 得 很 快 ， 坚 过 商 砂 后 ， 网 络 的 目标 就 已 经 过 到 要 求 。 


Re 古寺 站 1 关中 二 守 Tea 司 耳 信 





一 4 
而 生 1 起 
了 于 Peace 


图 后 号 训练 时 时 


通过 仿真 可 以 检验 训练 后 的 网 络 对 信号 的 遇 近 效果 。 通 过 以 下 的 代码 可 以 将 网 络 得 到 
的 仿真 轴 出 和 实际 信号 的 输出 些 制 在 一 张 图 上 ， 如 图 6-10 所 示 ， 这 样 就 可 以 很 直观 地 检 骏 
同 络 对 信 和 号 的 通 近 效果 。 可 以 看 出 ， 训 练 后 的 网 阁 对 正弦 信和 号 的 通 近 效果 是 非常 好 的 。 
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仿真 时 ， 将 信和 真 输出 向 量 的 名 入 设 定 为 simubp_sim， 其 目的 是 为 了 避免 
和 训练 时 的 榆 出 向 量 simubp_outpuis 相 混 清 。 









而 - 一 - ~ 
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轩 人 10 画 至 逼近 请 果 


64 数据 操作 


数据 操作 一 方面 指 的 是 和 将 MATLAB 工作 空间 中 的 数据 导入 到 GUI 中 ， 也 可 以 将 GUI 
中 的 台 据 变量 导出 到 MATLAB 工作 空间 中 ， 另 一 方面 是 指数 据 的 存 傅 . 副 除 . 恢复 和 重新 
调用 等 。 


6.4.1 工作 空间 到 GUI 的 数据 导 人 


可 以 通过 吞 下 的 方式 特工 作 宣 和 间 中 的 整 据 变量 导 闪 到 GUI 中 。 
首先 ,在 WMATLAB 市 地 行 中 输 六 旭 下 的 代码 : 


这 样 一 课 ， 喜 得 到 了 手气 向 量 m 和 1， 它们 帮 几 41 个 元 素 蛆 成 ， 回 副 NetwarkyData 
Manager 窗口 ， 单 击 其 中 的 【Import] 技 钮 ， 筒 到 如 图 G-1l 记 示 的 对 话 框 。 

选中 此 对 话 框 左 侧 的 Souree 域 中 的 Impon fom MATLAB workplace 单 选 框 , 然后 在 其 
让 的 呈 jeeta Wariable 嘉 李 框 中 选中 心 在 对 话 框 右 侧 的 Name 训 李 框 中 输 六 P， 表示 在 GUI 
中 访 囊 据 向 量 的 老 称 亦 汶 站 ， 业 后 选中 Inpus 单 选 框 ; 表示 该 数据 向 量 是 同 闭 的 畏 六 向 量 。 
最 后 章 击 右 下 葡 的 【impaor]】 按钮 ， 就 可 以 将 p 作为 同 络 的 输 六 回 此 导 六 到 GUIT 中 。 拉 照 
同样 的 方式 ， 也 可 以 格 上 作为 网 络 的 目标 向 量 导入 到 GUI 中 。 此 时 ， 新 导入 的 PP 和 tt 分别 
出 现在 WetworloDiata Manager 窗口 中 的 和 puts 和 Targets 误 本 框 申 人 委 别 表示 神经 网 阁 的 办 
入 向 量 和 目标 向 量 ， 








图 人 ii 数据 徐 入 


此 外 ， 访 对话 杠 Source 域 中 还 提供 了 另外 一 个 选项 Load from disk fle， 这 表明 还 可 以 
从 酸 邱 中 导 整 据 ， 


上 面 的 两 本 数据 向 量 P 虽 类 名 韩 一 致 ， 但 它们 实际 上 处 于 不 同 的 工作 室 
间 ， 伐 表 不 同 的 变量 . 





6.4.2 GUI 到 工作 空间 的 数据 导出 


通过 GUl1 得 到 的 同 络 仿真 站 果 ， 调 练 结 果 和 误 莽 等 ， 都 可 以 导出 到 MATLAB 的 凋 学 
行 室 间 中 ， 在 闪 千 行 工作 室 间 中 可 以 利用 这 些 数据 进行 一 些 其 他 措 作 ， 

以 仿真 结果 的 导出 为 例 亨 明 数据 的 导出 过 程 。 优 真得 到 数据 向 量 simubp_sim 后 ， 回 到 
NetworkjData Manager 窗口 , 在 右 便 的 Outputs 文本 框 中 出 现 了 simubp_sim 变量 , 如 图 三 12 
所 示 。 





图 让 他 MetwarciDala tansper 窗口 


选中 simubp_sim 变量 ， 然 后 单 击 【View】 接 钮 ， 可 以 看 到 该 变量 的 元 素数 据 ， 如 图 
E13 所 示 : 


呈 _ 面 二 证 本 二 面 身 帮 | 
ESESMATLAB:Zomi: 


.1 有 15- 口交 有 本 -和 昌 4 时 < | 





阳 扎 13 变量 显示 

单 击 【Export】 技 钥 ， 出 现 数据 导出 对 请 框 ， 如 图 6-14 所 示 。 这 里 列 出 了 GUI 当前 所 

有 的 数据 变量 。 这 里 选中 变量 simubp_sim， 并 单 击 【Expor]】 技 钮 ， 将 该 对 话 框 基 闭 ， 变 
量 simubp_sim 就 导出 到 僵 对 行 空间 中 了 。 为 了 检验 以 上 过 程 是 否 成 功 ， 在 MATLAB 合生 
行 中 输入 who 康 检 查 此 时 工作 空间 中 的 所 有 变量 ， 可 得 到 以 下 结果 ， 






力克 14 数据 时 天 对 话 民 


可 以 按照 同样 的 方式 将 设计 好 的 网 络 导 出 到 全 信行 空 间 中 ， 导 出 成 功 后 ， 在 命令 行 和 
口中 输入 simubp， 可 得 到 网 络 的 基本 信息 ， 如 下 : 


1 


还 有 银 委 内 容 ， 也 于 简 同 的 原 国 ， 在 此 再 再 珊 志 ， 襄 者 可 以 自行 查看 ， 
6.4.3 ”数据 的 存储 和 | 读 取 


通过 GUI 定 匀 的 变量 .数据 和 网 络 可 以 存 情 到 酮 托 中 ， 需 要 前 时 候 再 加载 ， 这 样 就 可 
以 憾 得 证 计 好 的 网 效能 扔 重复 使 用。 而 和 丰 用 每 遍 者 要 重新 设计 。 下 面 复 们 以 撮 野 网 阁 的 存 
肇 和 读 取 汶 例 ， 创 昭 数 据 的 存储 和 读 取 过 程 。 

加 到 图 末 刺 ， 选 惠 simmubp 项 将 其 划 话 ， 外 后 单 击 在下 和 角 的 【Sawe] 技 组 ， 出 现 Sawve 吕 
王 了 AT 首 二 对 话 异 ， 如 团 奈 1 所 示 ， 





图 下 15 SBwe 涟 是 LAT Ele 对 话 杠 
单 击 【 慑 存 〗 接 宇 ， 寿 网络 以 后 MAT 云 件 的 带 式 存 依 在 硬 查 中 ， 这 里 将 玄 伞 名 设 定 为 


到 Si 

如 果 址 小 心 将 网 绍 讽 删除 或 者 需要 重新 自动 MATLAB， 避 们 膛 可 以 利用 导出 动 龙 特 网 
暴 误 人 忻 导出 到 UL 中 。 下 面 介 铀 在 重新 启动 MATLAB 的 情况 下 ， 如 何 和 将 网 络 误 人 忻 导出 到 
GUI 中， 

重新 启动 MATLAB 后 ， 在 命 地 行 窗口 输入 malool 命 邓 ， 和 启动 NetworltiData Mianagcr 
窗口 ， 单 击 【Expor] 按钮 ， 出 现 如 图 全 16, 硬 示 的 数据 时 入 对 话 框 。 





图 素 款 数据 导 关 对 话 杠 


在 Souree 域 中 透 中 Load from 出 红 fle 昔 选 柑 ， 姑 后 单 击 【Emowge]】 技 钮 确定 网 络 支 件 
的 来 源 ， 如 图 全 他 所 示 。 选 中 simagim 误 件 ， 单 击 【 打 开 】 接 钮 或 者 戏 击 该 嘉 件 ， 和 将 玄 件 导 
大 到 GUIT 中 ， 

童 击 [打开 了 扶 钥 后 ,出 现 如 图 闲 二 所 示 的 窗口 , 在 SelactaWariable 框 市 质 中 二 mubp， 
可 以 在 Mame 立 李 框 中 输 六 网 络 在 GUI 中 的 名 称 ， 这 里 取 原 来 的 和 名称， 也 就 是 时 认 的 名 称 
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ES 多 ESMATLAB:7Ywi 

便 醒 可 = - 本 帮 四 = 
simubp。 MATLAB 有 识别 数据 类 型 的 能 力 , 这 里 它 已 经 识别 出 导入 的 数据 美 型 为 神经 网络 ， 
Import As 下 的 单 远 项 中 只 有 Netwerk 是 有 效 的 ， 其 余 的 都 是 训 色 的 ， 不 可 选 





出 E17 网 端 京 性 选 挟 
最 后 单 击 位 于 著 口 右 下 角 的 【Load】 按钮 ， 我 们 发 现 网 络 simubp 已 经 在 GUI 中 了 ， 


徊 图 休 19 所 未 。 





圈 亲 1 导 六 网 络 二 mabp 后 的 MetwaorgDaua hiansper 窗口 


6.44 数据 出 除 
在 通过 GUT 和 进行 神 皮 网 综 的 设计 分 析 峙 ， 有 时 旋 可 能 过 出 现 况 操作。 例如， 在 设计 网 





1 
络 和 输入 向 量 的 时 候 出 现 了 错误 ， 但 直到 后 来 才 发 现 ， 这 时 候 就 需要 肌 除 错误 的 输入 向 量 ， 
从 而 设计 新 的 输入 疝 量 。 
数据 肌 除 最 简单 的 方法 是 强行 关闭 MAILAB 窗口 ， 或 者 到 任务 管理 器 中 结 曙 
MATLAB.exe 进程 。 这 种 方法 的 优点 是 速度 非常 快 ， 但 必须 要 提醒 读者 的 是 ， 利 用 这 种 方 
法 进行 数据 删除 以 前 ， 必 须 将 所 有 认为 有 用 的 数据 变量 保存 起 来 ， 然 后 在 重新 启动 
MATLAB 后 ， 将 它们 一 一 导入 到 新 的 GUI 中 ， 这 样 才 可 以 保证 数据 不 丑 失 。 
另 一 种 方法 是 在 NetworkyData Manager 窗口 中 选中 要 删除 的 数据 ， 如 图 6-19 所 示 ， 选 
中 了 网 络 simubp， 然 后 单 击 【Delete]】 按钮 ， 就 可 以 将 BP 网 络 simubp 删除 了 。 
册 除 GUI 工作 空间 中 的 数据 并 不 影响 已 经 导出 到 MAILAB 命令 行 室 间 中 
前 数据 ， 即 使 关闭 了 Network/Data Manager 窗口 ， 命 今 行 空间 中 的 数据 也 依然 
存在 。 














6.3 小 结 


GUI 是 神经 网 络 工 具 逢 提供 的 人 机 交互 界面 ， 它 引导 工程 人 员 一 步 步 地 建立 和 训练 网 
络 ， 避 免 了 代码 的 编写 过 程 。 但 是 ， 如 果 你 是 一 个 新 手 ， 我 建议 不 要 一 上 来 就 使 用 GUI 来 
解决 实际 问题 ， 因 为 GUI 中 的 一 些 功能 只 有 在 熟练 掌握 了 工具 箱 中 的 大 部 分 卫 数 后 才 可 以 
正确 应 用 。 因 此 ， 最 好 的 方式 是 首先 利用 编写 代码 的 方式 来 学 习 神 经 网 络 工具 箱 ， 精 通 了 
各 种 函数 的 实际 意义 、 调 用 格式 和 注意 事项 以 后 ， 就 可 以 利用 GUI 方便 快捷 地 来 解决 实际 


问题 了 。 
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第 7 章 ， 神 经 网 络 控制 理论 及 应 用 设计 


我 们 已 经 知道 ， 神 经 网 络 由 于 其 固有 的 自学 习 、 自 适应 、 自 组 织 和 大 规模 并 行 处 理 等 
能 力 ， 已 经 在 模式 识别 、 信 号 处 理 、 系 统 辨识 、 控 制 ， 以 及 优化 等 领域 得 到 了 广泛 的 应 用 。 
近年 来 ， 神 经 网 络 在 智能 控制 系统 中 显示 了 极 大 的 应 用 潜力 ， 人 们 已 经 利用 神经 网 络 来 处 
理 控制 系统 的 非 线 性 、 不 确定 性 和 如 何 逼 近 系 统 的 辩 识 函数 等 问题 ， 并 取得 了 大 量 的 研究 
成 果 . 

根据 控制 系统 的 结构 ， 可 把 神经 控制 的 应 用 研究 分 为 诸如 监督 式 控制 、 道 控制 、 神 经 
自 适应 控制 和 预测 控制 等 方向 。 控 制 理 论 领 域 与 神经 网 络 之 间 的 关系 如 图 7-1 所 示 ， 其 中 
的 空白 框 表示 没有 明显 的 对 应 关系 。 
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图 7-1 控制 与 神经 网 络 的 关系 


本 章 的 内 容 包 括 ; 

名。 神经 网 络 控制 结构 

和 ”反馈 线性 化 控制 及 MATLAB 实现 
@@ 基于 Simulink 的 神经 网 络 控制 实现 


7.1 神经 网 络 控制 结构 


神经 网 络 用 于 控制 系统 设计 主要 是 针对 系统 的 非 线性 、 不 确定 性 和 复杂 性 进行 的 。 由 
于 神经 网 络 的 自 适应 能 力 、 并 行 处 理 能 力 和 超 强 的 鲁 棒 性 ， 使 得 采用 神经 网 络 的 控制 系统 
具有 更 快 的 计算 速度 (实时 性)、 更 强 的 适应 能 力 和 更 好 的 鲁 棒 性 。 资 料 显示 ， 国 内 外 将 神 
经 网 络 应 用 于 控制 系统 设计 的 方式 和 结构 有 很 多 ， 目 前 尚 无 统一 的 分 类 方法 。 萎 下 来 本 闻 
将 简单 介绍 一 下 更 有 的 、 应 用 比较 广泛 的 几 种 神经 网 络 控制 结构 。 


7.1.1 神经 网 络 监 督 控制 


在 实际 应 用 中 有 许多 控制 问题 , 由 于 被 控 对 象 的 解析 模型 位 置 完全 未 知 或 者 部 分 未 知 ， 
利用 传统 的 控制 理论 来 设计 控制 器 非常 困难 ， 人 工控 制 可 能 是 惟一 的 选择 。 但 是 ， 在 恶劣 





的 工作 环境 下 ， 或 者 控制 任务 只 (是 一 些 单调 重复 、 繁 重 的 简单 操作 时 ， 则 有 必要 利用 目 
动 控制 取代 上 述 手 工 操作 。 

取代 人 工控 制 的 途径 有 两 种 ;一 种 是 将 手工 操作 中 的 经 验 总 结 成 普通 的 规则 或 模糊 规 
则 ， 然 后 构造 相应 的 专 控 控制 或 模糊 控制 器 ， 另 一 种 是 在 知识 难以 表达 的 情况 下 ， 利 用 神 
经 网 络 学 习 人 的 控制 行为 ， 即 对 人 工控 制 器 建 模 ， 然 后 利用 此 神经 网 络 控制 器 代替 人 工控 
制 。 这 种 通过 对 人 工 或 传统 控制 器 进行 学 习 ， 然 后 利用 神经 网 络 控制 器 取代 或 逐渐 取代 原 
控制 器 的 方法 ， 称 为 神经 网 络 监督 控制 。 这 类 方案 的 示意 图 如 图 7-2 所 未。 





图 7-: 神经 网 绪 监 督 控 制 《I2 


可 见 ， 神 经 网 络 监督 控制 实际 上 就 是 建立 人 工控 制 器 的 正 向 模型 。 经 过 训练 ， 神 经 网 
络 记忆 该 控制 器 的 动态 特性 ， 并 且 接 收 传 感 信息 输入 ， 最 后 输出 与 人 工控 制 器 相似 的 控制 
作用 。 此 结构 的 缺点 在 于 人 工控 制 器 靠 视觉 反馈 进行 控制 ， 而 利用 神经 网 络 控制 器 进行 控 
制 后 ， 由 于 缺乏 视觉 反馈 ， 所 构成 的 控制 系统 实际 上 是 一 个 开 环 系统 ， 这 使 得 它 的 稳定 性 
和 重 棒 性 均 得 不 到 保证 。 

另 一 种 神经 网 络 监督 控制 是 传统 控制 器 ， 如 在 PID 控制 器 的 基础 上 ， 增 加 一 个 神经 网 
络 控制 器 ， 如 图 7-3 所 示 。 此 时 ， 神 经 网 络 实际 上 是 一 个 前 馈 控 制 器 ， 它 建立 的 是 被 控 对 
象 的 道 模型 。 可 见 ， 神 经 网 络 控制 器 通过 向 传统 控制 器 的 输出 进行 学 习 ， 在 线 调整 自己 ， 
目标 是 使 反馈 误差 e(9 或 wp 趋向 于 0， 从 而 使 自己 逐渐 在 控制 中 占据 主导 地 位 ， 以 便 最 终 
取消 反馈 控制 器 的 作用 。 但 与 图 7-2 的 结构 不 同 ， 这 里 仍然 存在 反馈 控制 器 ， 一 旦 系统 出 
现 寺 扰 等 情况 ， 反 馈 控 制 器 依然 可 以 发 挥 作 用 。 因 此 ， 采 用 这 种 前 馈 加 反馈 的 监督 控制 方 
法 ， 不 仅 可 以 确保 控制 系统 的 稳定 性 和 和 鲁 棒 性 ， 而 且 可 以 有 效 地 提高 系统 的 精度 和 目 适 应 
能 力 。 





图 7-3 神经 网 络 监 督 控制 〈《 工 ) 
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神经 网 络 直 接 逆 控制 就 是 将 被 控制 对 象 的 神经 网 络 逆 模 型 直接 与 被 控 对 象 串 联 起 来 ， 
以 使 得 期 望 输出 【“ 即 网 络 输入 ) 与 对 象 实际 输出 之 间 的 传递 函数 等 于 1。 直 接送 控制 在 机 
器 人 控制 方面 有 着 较 多 的 应 用 。 

神经 网 络 直接 道 控制 在 结构 上 与 逆向 建 模 思 想 有 很 多 相似 之 处 。 显 然 ， 该 方法 的 可 用 
性 在 相当 程度 上 依赖 于 道 模型 的 准确 程度 。 由 于 缺乏 反馈 ， 简 单 连 接 的 直接 逆 控 制 将 缺乏 
曾 棒 性 。 因此， 一 般 应 使 其 具有 在 线 学 习 的 能 力 ， 即 必须 保证 道 模型 的 连接 权 值 能 够 在 线 








修正 。 
如 图 7-4 所 示 ， 它 给 出 了 两 种 结 攀 方 案 . 在 图 7-4 (a) 中 ，NN1 和 NN2 为 两 个 网 络 结 
构 完 全 相同 的 神经 网 络 ， 采 用 相同 的 学 习 算法 ， 以 使 得 NN2 的 输出 和 输入 的 嵩 差 e 的 二 


次 型 达到 最 小 ， 即 NN1 和 NN2 都 沿 着 瑟 = 也 er (:)e(t) 的 负 梯度 方向 修改 连接 权 值 。 在 


图 74 :by 中 ， 评 价 函 数 - 一 般 采 用 efb=wrb-yf0， 但 也 可 采用 ef(b=ag0of(ab-WfOJ+A 等 
更 为 一 般 的 权 值 评价 函数 ， 其 中 好 , 和 好, 为 适当 维 数 的 矩阵 。 


乓 起 1 [有 




















图 7-4 NIN 直接 道 控 解 


7.1.3_NN 自 适 应 控制 


与 传统 自 适 应 控制 相同 ， 神 经 网 络 自 适 应 控制 也 可 分 为 自 校正 控制 《STC) 和 模型 参 
考 自 适应 控制 (MRAC) 两 种 。 两 者 的 区 别 在 于 ， 自 校正 控制 将 根据 对 系统 正 向 和 《了 或? 
道 模型 建 模 的 续 果 ， 直 接 调 节 控 制 器 的 内 部 参数 ， 使 系统 满足 给 定 的 性 能 指标 。 而 在 模型 
参考 控制 中 ， 闭 环 控 制 系统 的 期 望 性 能 由 一 个 稳定 的 参考 模型 描述 ， 控 制 的 目的 是 使 被 控 
对 象 的 输出 源 进 地 趋 于 参考 模型 的 输出 。 

LNN 自 校 正 控制 

神经 网 络 自 校正 控制 可 分 为 直接 和 间接 控制 两 种 。 它 们 的 根本 区 别 是 : 前 者 使 用 常规 
控制 器 ， 离 线 瓣 识 的 神经 网 络 估计 器 需要 足够 高 的 建 模 精度 ， 而 后 者 则 同时 使 用 神经 网 络 
控制 器 和 神经 网 络 估计 器 ， 并 且 估 计 器 可 以 在 线 修 正 。 

神经 网 络 直接 白 校 正 控制 也 称 为 神经 网 络 直接 逆 控制 ， 实 际 上 它们 是 一 致 的 。 其 结构 
如 图 7-4 所 未。 

神经 网 络 问 接 自 校正 控制 结构 如 图 7-$ 所 示 。 神 经 网 络 估计 器 用 做 过 程 参数 或 某 些 非 
线性 函数 的 在 线 估 计 器 ， 而 控制 信号 则 通过 常规 控制 器 发 出 。 这 种 控制 结构 已 被 许多 研究 
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图 7-5 神经 网 络 间接 自 校正 控制 结构 


2. 神经 网 络 模型 参考 自 适应 控制 
基于 神经 网 络 的 模型 参考 自 适 应 控制 也 可 分 为 直接 和 间接 两 种 ， 如 图 7-6 所 示 。 神 经 


网 络 控制 器 NNC 的 权 值 修正 目标 是 使 输出 误差 e.( 八 = DO 一 人 一 0 或 者 使 ee 的 二 


次 型 最 小 。 对 于 直接 模型 参考 自 适应 控制 ， 如 图 7-6 (a) 启示 ， 误差 e 的 反 向 传播 必须 确 
知 被 控 对 象 的 数学 模型 ， 这 给 NNC 的 训练 带 来 了 困难 。 为 解决 这 一 问题 ,可 采用 正 逆 建 模 
的 有 关 方 法 ， 引 入 神经 网 络 辨 识 器 NNI， 首 先 ， 为 离线 办 识 被 控 对 象 建立 正 向 模型 ， 作 为 
NNI， 可 由 ee. 进行 在 线 修正 ， 从 而 形成 如 图 7-6 bp》 所 示 的 间接 模型 参考 自 适 应 控制 。 显 
然 ， 在 这 种 结构 中 ，NMNI 可 为 NNC 提供 误差 e-. 或 其 梯度 的 反 向 传播 通道 。 由 于 参考 模型 
可 视 为 期 望 输 出 ， 因 此 ， 在 对 象 部 分 已 知 的 情况 下 ， 若 用 常规 控制 器 代替 NNC， 此 法 也 就 


与 间接 自 校 正 控 制 雷 同 了 








图 7-65 ”神经 模型 参考 自 适 应 控制 
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7.1.4 神经 网 络 内 模 控 制 





内 模 控制 是 近年 来 被 人 们 逐渐 熟悉 的 一 种 过 程控 制 方法 ， 它 主要 利用 爱 控 对 银 模 型 的 
道 来 构成 控制 系统 。 内 模 控 制 为 非 线 性 反馈 控制 器 的 设计 提供 了 一 种 直接 方法 ， 具 有 较 强 
的 鲁 棒 性 。 利 用 神经 网 络 建立 受 控 对 象 的 正 向 模型 和 控制 器 〈 道 模型 )， 即 构成 了 神经 网 络 
内 模 控 制 ， 如 图 7-7 所 示 。 





7-7_NN 内 模 控 制 


在 图 7-7 中 ， 系 统 的 正 向 模型 与 受 控 对 银 并 联 ， 两 者 之 差 用 于 反馈 信号 ， 此 反馈 信号 
又 由 前 馈 通道 及 控制 器 处 理 ， 引 入 让 波 器 的 目的 是 为 了 获得 更 好 的 鲁 棒 性 和 跟踪 响应 ， 


7.1.5 神经 网 络 预 油 控 制 


预测 控制 ， 又 称 为 基于 模型 的 控制 ， 是 20 世纪 70 年 代 扶 期 发 展 起 来 的 一 类 新 型 控制 
算法 。 这 种 算法 的 本 质 特 征 是 预测 模型 、 滚 动 优化 和 反馈 校正 。 已 经 证 明 ， 这 种 方法 对 非 
线性 系统 有 稳定 作用 。 

如 图 7-8 所 示 ， 给 出 了 神经 网 络 预测 控制 方案 ， 图 中 的 神经 网 络 预测 器 建 走 了 被 控 对 
象 的 预测 模型 ， 并 且 可 以 在 线 修正 。 利 用 预报 模型 ， 根 据 系统 当前 的 输入 输出 信息 ， 预 测 
未 来 的 输出 值 。 利 用 神经 网 络 预测 器 给 出 的 未 来 一 段 时 间 内 的 输出 值 和 期 望 输出 ， 对 定义 
的 二 次 型 指标 函数 进行 滚动 优化 《由 优化 器 完成 ， 实 质 上 是 一 种 优化 算法 ， 也 可 利用 动态 
网 络 实现 )， 产 生 对 未 来 的 控制 序列 ， 并 仅 以 第 一 个 控制 量 进 行 下 一 步 的 控制 。 


也 








量 7 了 -8 NN 预测 榨 制 结构 
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7.1.6 ”神经 网 络 自 适 应 评判 控制 


人 0 ， 全 于 
NE 和 上 如 间 





上 述 控制 方法 者 有 一 个 本 质 上 的 共同 点 ， 即 都 要 求 提 供 对 象 的 期 望 输出 。 

由 神经 网 络 理论 可 知 ， 和 神经 网 络 学 习 算 法 一 般 可 分 为 两 种 类 型 : 有 教师 学 习 和 无 教师 
学 习 。 有 教师 学 习 虽 然 有 最 高 的 学 习 效率 ， 但 它 需 要 教师 提供 浆 络 的 期 请 输出， 对 于 神经 
网 络 控制 器 ， 也 就 是 需要 提供 期 望 的 控制 信号 。 而 一 般 来 说 ， 控 制 的 目标 就 是 要 找到 被 控 
系统 的 这 -期 望 答 入 。 人 在 系统 模型 未 知 或 部 分 未 知 的 情况 下 ， 这 显然 是 难以 预先 提供 的 。 
无 教师 学 习 实 质 上 是 一 种 自 组 织 阳 类 方法 ， 它 利用 输入 数据 构造 内 部 救 师 模型 ， 不 接受 其 
他 信息 。 除 了 这 种 学 习 方 式 外 ， 还 存在 一 种 上 髓 砚 学 习 〈reinforcement leaming) 方式 ， 实 质 
上 也 可 认为 是 一 种 有 教师 学 习 。 两 者 的 区 别 在 于 ， 有 教师 学 习 中 教师 需要 对 给 定 输入 提供 
期 望 输 出， 而 再 励 学 习 中 的 教师 不 是 指定 的 ， 而 是 一 种 评价 ， 即 教师 是 根据 一 定 的 性 能 指 
标 对 系统 性 能 做 出 评价 ， 提 供给 网 络 进行 学 习 。 

显然 ， 只 需要 一 个 评价 值 的 再 励 学 习 ， 在 缺 乏 被 控 系 统 精 确 观 测 值 并 只 能 获得 定型 的 
傅 息 反馈 时 ， 是 十 分 有 用 的 。 

神经 网 络 自 适 应 评判 控制 就 是 利用 再 励 学 习 的 一 种 控制 结构 ， 如 图 7-9 所 示 。 这 种 方 
法 最 早 由 Barto 等 在 1983 年 提出 ,后 由 Anderson 等 加 以 发 展 。 从 图 中 可 以 看 出 ,神经 网 络 
自 适 应 评判 控制 有 两 个 组 成 部 分 ， 其 中 自 适 应 评判 网 络 在 整个 控制 系统 中 ， 相 当 于 一 个 需 
要 进行 再 励 学 习 的 教师 。 它 的 作用 一 方面 是 通过 不 断 奖 励 、 惩 昼 等 再 励 学 习 ， 使 自己 逐渐 
成 为 一 个 合格 的 教师 ; 另 一 方面 是 在 学 习 完 成 后 根据 被 控 系 统 的 当前 状态 及 外 部 再 励 信和 号， 
产生 一 个 内 部 再 而 信号， 对 目前 的 控制 作用 做 出 评价 ， 并 据 此 知道 控制 作用 网 络 的 后 励 学 
习 ， 产 生 下 一 步 的 控制 作用 。 














图 7-9 神经 网 络 自 适 应 评判 控制 


神经 网 络 自 适 应 评判 控制 与 人 脑 的 控制 与 决策 过 程 比较 接近 ， 除 了 应 该 随时 了 解 一 些 
定性 信息 外 ， 它 完全 不 需要 被 控 对 象 的 先 验 模型 ， 特 别 适 合 于 许多 具有 向 度 非 线性 和 严重 
不 确定 性 的 复杂 系统 的 控制 。 

除了 上面 介 绍 的 儿 种 神经 网 络 控制 结构 ， 实 际 应 用 中 还 存在 许多 其 他 类 型 的 结构 ， 例 
如 将 神经 网 络 放置 到 传统 控制 器 之 前 或 之 后 的 串联 结构 ， 将 神经 网 络 应 用 于 变 结构 控制 系 
统 设计 而 形成 的 神经 网 络 变 结构 控制 等 。 此 外 ， 神 经 网 络 与 专家 系统 、 模 糊 控 制 、 过 传 算 
法 等 技术 相 结合 形成 的 神经 次 络 专家 控制 、 神 经 网 络 模糊 控制 、 基 因 神 经 网 络 模糊 控制 等 ， 
近年 来 己 经 受到 广泛 的 重视 并 成 为 智能 控制 技术 研究 和 发 展 的 新 热点 。 

实际 .上 ,就 目前 来 说 , 神经 网 络 控制 尚 无 统 - -的 分 类 方法 ，Werbos 将 其 分 为 学 习 控 制 、 
直接 着 动态 控制 、 神 经 自 适 应 控制 、BTT 控制 和 自 适 应 评判 控制 5 类。 另外 还 有 一 些 分 类 
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方法 ， 不 过 都 是 基于 控制 结 攀 开 式 上 进行 划分 的 如 果 分 类 时 考 上 设计 的 出 发 点 ， 那么 可 

将 神经 网 络 控制 分 为 以 上 3 类 。 

(1) 单纯 的 神经 网 络 控制 

它 的 特点 是 不 依 夭 传统 控制 理论 和 控制 系统 结构 ， 完 全 从 神经 网 络 白 身 特点 出 发 ， 构 
成 控制 系统 。 神 经 网 络 监督 控制 、 神 经 网 络 直 接 道 控制 〈 自 校正 控制 ) 和 神经 网 络 自 适应 
评判 控制 均 属 于 这 - -类 。 

[2》 基于 传统 控制 理论 的 神经 网 络 控制 

它 的 特点 是 采用 传统 控制 理论 的 控制 结构 ， 用 神经 网 络 取代 其 中 的 部 分 内 容 ， 如 辨识 
器 、 控 制 器 或 对 象 模 型 。 它 包括 神经 网 络 间接 自 校正 控制 、 神 经 网 络 模型 参考 自 适应 控制 、 
神经 网 络 内 横 控 制 、 神 经 网 络 预测 控制 、 神 经 网 络 变 结 构 控 制 和 推理 控制 。 

3) 与 其 他 智能 技术 相 结合 的 神经 网 络 控制 

它 的 特点 是 将 神经 网 络 与 其 他 智能 技术 相 结 合 ， 形 成 具有 各 种 技术 优点 的 综合 智能 控 
制 系 统 ， 这 代表 了 智能 控制 的 发 展 方向 。 常 见 的 有 神经 网 络 专家 系统 、 神 经 网 络 模 头 控制 


等 。 











7.2 ”反馈 线性 化 控制 及 MATLAB 实现 


反馈 线性 化 控制 器 又 称 为 NARMA-L2 控制 器 。 上 反馈 线性 化 理论 的 中 心思 想 是 通过 消 
除非 线性 ， 将 一 个 非 线 性 系统 转换 为 线性 系统 。 


7.2.1 基于 神经 网 络 的 反馈 线性 化 控制 原理 


所 谓 反 馈线 性 ， 顾 名 思 义 就 是 利用 反馈 的 控制 手段 来 消除 系统 中 的 非 线性 ， 以 使 得 其 
闭环 系统 的 动力 学 方程 是 线性 的 。 反 馈线 性 化 的 方法 可 以 很 容易 地 刷 实 施 到 可 控 标 准 型 的 
控制 系统 中 。 给 定 一 个 系统 ， 其 动力 学 方程 为 : 


(CCC 




















其 中 , 三 是 控制 输出 ，* 为 标量 ， 瑟 为 状态 向 量 ， 有 : 


人 区 由 区 
下 一 革 , 一 一 一 一 
dt | 


此 ， 可 将 动力 学 方程 写 为 ; 


- 匠 -2 
于 
上 2 _ 加 
本 革 
其 | 克 
站 ( 忆 ) 十 如 ( 王 加 
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此 时 ， 和 希望 通 过 加 入 一 个 反馈 控制 项 ws， 使 得 该 系统 具有 以 下 理想 的 线性 特性 ， 


攻 2 
j 总 | 二 
di 
嫩 1 Ar 
六 一 由 一 总 苔 一 一 起 十 Cr 


其 中 , 护 C=12m) 和 C 均 为 常数 ，r 为 参考 输入 。 
通过 两 式 之 冰 的 对 比 即 可 求 得 反馈 控制 项 s， 有 
| -EX+Cr-F()] 
大 二 一 
(和 ) 
利用 # 对 系统 进行 控制 ， 原 系统 中 的 非 线 性 将 被 消除 ， 被 控 系 统 的 闭环 特性 将 呈现 出 
其 网 络 的 线性 特性 ， 并 通过 选择 适当 的 参数 正和 C， 即 可 得 到 期 望 的 任意 半 阶 线性 系统 的 
响应 特性 。 


7.2.2 ”反馈 线性 化 控制 实例 
本 小 节 以 神经 网 络 工具 箱 中 附带 的 简单 机 械 璧 为 例 ， 介 绍 基于 神经 网 络 的 反馈 线性 化 
控制 的 过 程 。 


1. 背景 概述 
如 图 7-10 所 示 , 描述 了 一 个 简单 的 单 连 接 机 械 臀 , 控制 目标 是 使 机 械 辟 能够 自由 运动 。 








图 7-10 简单 的 单 连接 机 械 辟 
该 系统 的 动力 学 方程 为 : 





了 
4 -_l0sinG_-2d2，， 
di dt 


其 中 ， 更 代表 机 械 辟 的 角度 ,z 代表 PC【〈 直 流 )》 电机 的 转 矩 。 控 制 忆 标 是 训练 控制 匿 ， 使 
得 机 械 臂 能 够 跟踪 如 下 的 参考 模型 ; 
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其 中 ， 代 表 期 望 的 和 输出 角 位 移 。 由 此 可 得 到 : 
#=9r-[98 全 和 天 ( 王 ) 


由 被 控 系 统 的 数学 模型 , 可 以 根据 反馈 线性 化 的 思想 推导 出 线性 化 控制 系统 的 控制 律 ， 
首先 取 ; 
F(XE)=10sinx -2 


接 下 来 通过 设计 一 个 神经 网 络 来 进行 该 反馈 线性 化 控制 。 
2, 神经 网 络 设计 


假定 非 线性 系统 的 采样 周期 为 0.05 秒 ， 通 过 利用 |， 
dX 于 ( 估 + 一 候 ) 
dr 录 
的 近似 关系 将 被 控 系 统 的 离散 时 间 动 力学 特性 近似 描述 为 ， 
(有 
买 人 二 上 = 时 (二 届 
人 t0 修 放 sa 
或 者 
其 ( 天 + 人 一 王 ( 工 全 ))+G{X (JJ 人 ED) 
接 下 来 设计 一 个 神经 网 络 代替 函数 二 ， 利 用 该 函数 作为 控制 器 za 中 的 一 部 分 抵消 系统 
中 的 非 线性 ， 该 函数 为 《 称 为 逼近 函 效 ? 
己 ()= 妈 +4t(10sin 为 一 2382) 
假定 神经 网 络 对 该 函数 的 道 近 为 W， 那 么 带 有 神经 网 络 的 非 线性 消除 控制 律 为 : 


和 +4(9r-[9 6 和 )-N， 
和 


显而易见 ， 亡 需 的 神经 网 络 具有 两 个 输入 ， 分别 为 习 和 加。 网 络 设计 的 目的 是 产生 
诞 近 函 数 的 非 线性 输出 ， 所 以 输出 层 只 有 一 个 输出 。 因 此 ， 这 里 设计 一 个 单 隐 层 的 BP 
神经 网 络 模型 ， 中 间 层 取 9 个 神经 元 ， 传 递 函 数 为 tansig; 输出 层 神经 元 的 传递 画 数 为 
Purelin 。 

为 了 对 网 络 进行 训练 ， 必 须 设 置 网 络 的 训练 样本 。 由 于 非 线 件 函数 表达 式 已 经 明确 给 
定 ， 所 以 可 以 通过 随机 选取 一 定数 目的 工作 区 的 输入 ， 然 后 用 ER) 求 得 目标 输出 印 可 。 在 
实际 应 用 中 ， 如 果 上 出 现 很 难 描 述 非 线性 特 件 的 情况 ， 可 通过 记录 实际 被 测 系统 的 输入 /输出 
来 获得 样本 数据 ， 再 采用 适当 的 控制 策略 来 解决 问题 。 
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二 丰 本 | 介 用 总 二 | 
E 和 问 二 这 司 MATLAB ARw 


MATLAB 代码 为 : 





调 请 样 素 的 蹇 量 为 00 诅 ， 其 中 300 个 是 由 吕 到 -元 之 间 的 疏 以 及 = 亏 到 元 之 间 的 加 
所 产生 ， 另 外 100 站 是 入 速度 总 为 0， 即 种 柱 时 ， 通 过 同样 范围 的 症 产 生 ， 也 就 是 说 ， 和 希 
望 网 络 在 系 野 入 壹 时 的 非 线 性 畏 出 要 更 各 精确 ， 以 便 特 其 通过 反 铺 控制 而 完全 抵消 ， 使 其 
系 线 输出 达到 零 稳 恋 讽 莹 。 

况 络 的 调 氏 禄 莹 厂 如 图 7.11 古 未。 由 图 可 见 ， 缀 过 1000 或 训练 后 ， 网 络 的 输出 误 
攻 曲 斌 的 收效 速度 已 经 比较 钥 慢 了 ， 此 时 的 误 束 也 比较 小 了 。 


Presg 国 机 放生 8 证 阁 90 全 oil 地 


硬 


有 
让 
图 7.11 训 读 刘 些 曲 战 


为 了 检验 网 络 对 函数 扎 的 通 近 能力， 分 别 在 wm=0 和 = 工 有 时 对 函数 进行 逼近 ，m=0 
表示 由 只 必 为 四 的 函数 ，a= = 妇 表示 将 忆 置 固定 在 水 平方 向 ， 季 是 速度 扬 的 函 攻 ， 通 近 
情况 分 别 如 图 7.12 和 图 7-13 所 示 。 图 中 的 * 导 表示 函数 己 的 输出 ， 线 条 表示 术 经 网 疼 的 输 
出 。 电 图 可 见 ， 阅 阁 能 够 很 好 地 丙 近 非 钱 性 函数 

元 得 了 性 能 良好 的 神 蚂 网 络 后 ， 接 下 来 就 是 利用 访 挤 经 网 络 的 输出 求解 访 控 制 系统 的 
哺 应 特性 ， 铸 后 与 其 他 的 控制 方式 进行 比较 。 赴 难 发 现 ， 带 有 神经 网 络 的 控制 器 的 短 棱 性 
更 商 ， 情 确 性 也 重 奸 。 这 已 经 超出 本 书 的 范围 ， 在 此 就 不 详细 说 明了 ， 


。 二 | | 上 | 


ee 和 | 
啡 恒 ， 
是 且 ， 
下 
二 十， 
RE 
力也 位 状 = 和 时 网 北 的 逼近 性 能 
性 -一 二 一 
和 了 
| 可 
王 
到 
二 | 
天 人 
0 
图 了 13 ai== 达 时 间 些 的 逼近 性 能 
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7.3 基于 Simulink 的 神经 网 络 控制 


圳 竖 网 络 工具 箱 担 供 了 一 盟 可 以 在 Simmulink 中 使 用 的 模 战 ， 它 们 可 以 用 来 建立 网 络 和 
荡 于 网 些 的 控制 器 。 工 具 箱 中 还 提供 了 3 并 柠 制 的 有 其 Siaauliak 实例 ， 分 别 为 模型 预 误 控 
制 。 红 型 套 考 控制 和 反馈 厂 性 化 控制 ， 素 节 以 基于 神 餐 网 络 的 模型 大 考 兵制 为 例 ， 介 绍 如 
何 利用 Simaliak 实现 术 既 网 络 撑 制 。 

横 型 预 铀 控制 MPC 粘 宕 是 基于 被 控 对 象 的 将 率 和 状 讲 或 输出 的 动 夺 预 铀 值 , 在线 求解 当 
葡 控 坤 量 的 一 种 自生 应 控制 点 法 。 目 前 ， 轩 对 线性 系 矿 模型 的 预测 问题 已 经 得 到 了 解 次 ， 
但 是 对 于 非 北 性 系统 的 横 蝇 预 副 控制 ， 由 于 需要 建立 非 线 性 系统 的 预 铀 模型 ， 需 要 解决 的 
图 难 还 委 密 。 神 名 同 比 作 注 一 种 新 型 的 方法 体系 ， 具 有 他 布 并 行 处 理 。 非 线性 欧 射 。 自 适 
应 学 习 和 和 和 鲁 想 容 情 等 优良 特性 ， 为 解决 非 线性 系统 的 模型 预测 兵制 问题 提供 了 一 种 新 的 可 
能 的 余 径 ， 


73.1 基于 神经 网 络 的 MPC 原理 


MPC 是 20 世 刀 70 年 代 后 期 发 展 起 来 的 一 类 新 型 的 计算 机 控制 算 社 , 这 种 算法 的 本 质 
特征 包括 3 个 要 闽 ， 预 各 模 型 ， 税 动 优化 和 反 钱 校正。 

1， 预 测 撒 型 

在 模型 预测 控制 中 需要 一 个 描述 系统 动态 行为 的 基础 模型 ， 称 为 预测 模型 。 这 个 预测 
槛 型 应 访 具 有 根据 系统 的 历史 信息 和 未 来 输入 ， 硕 丽 其 未 来 输出 值 的 功能 。 

2 带动 已 化 

预测 控制 实质 上 是 一 种 优化 控制 算法 ， 它 采用 入 动 式 的 有 限时 域 的 答 由 忧 化 ， 这 种 优 





化 方式 有 两 个 特点 。 其 一 ， 优 化 目标 是 随时 间 推 移 的 。 也 就 是 说 ， 和 预测 控制 在 每 个 时 刻 都 
提出 一 个 基于 该 时 刻 的 优化 指标 ， 而 不 是 来 用 全 局 优化 指标 。 滚 动 优化 指标 的 局 部 性 ， 虽 
然 使 其 在 理想 情况 下 只 能 得 到 全 局 的 次 优 解 ， 但 是 当 模型 失 配 或 者 存在 时 变 、 非 线性 或 干 
扰 因 素 时 ， 能 够 顾及 这 种 不 确定 性 ， 及 时 进行 浆 补 ， 减 小 偏差 ， 保 持 实 际 上 的 最 优化 控制 。 
其 二 ， 由 于 采用 了 有 限时 域 的 输出 优化 ， 结 合 模型 的 输入 /输出 功能 ， 易 于 得 到 简便 的 在 线 
控制 律 ， 适 合 在 线 反复 进行 优化 的 需要 。 

3. 反馈 校正 

预测 控制 在 控制 的 每 一 步 ， 都 需要 检测 实际 输出 并 与 基于 预测 横 型 的 预测 值 相 比较 ， 
以 此 修正 模型 预测 的 不 确定 性 ， 然 后 进行 新 的 忧 化 。 因 为 作为 基准 的 预测 模型 只 是 系统 动 
态 特 性 的 粗略 描述 ， 加 上 实际 系统 中 可 能 存在 的 非 线性 、 时 变 和 千 执 等 因素 ， 基 于 横 型 的 
预测 不 可 能 和 实际 完全 相符 ， 这 就 需要 基于 偏差 的 误差 预测 对 模型 预测 进行 补充 ， 使 得 优 
化 建立 在 较 准 确 的 预测 基础 上 。 这 种 双重 预测 手段 是 克服 系统 中 存在 的 不 确定 性 的 一 种 有 
效 手 段 。 

由 于 在 模型 预测 控制 中 需要 一 个 描述 系统 动态 行为 的 预测 横 列 ， 而 神经 网 络 可 以 对 非 
线性 动态 过 程 进行 精确 描述 ， 因 此 ， 利 用 神经 网 络 对 非 线性 系统 进行 系统 辨识 ， 可 以 较 好 
地 解决 非 线 性 系统 的 预测 模型 问题 。 构 建 神经 网 络 预测 模型 是 设计 神 既 网 络 预 测控 制 器 的 
第 一 步 ， 用 做 预测 模型 的 神经 网 络 结构 可 以 为 带 有 输入 延迟 的 网 络 结构 ， 如 咎 7-14 所 示 。 







输入 向 量 胸 居 和 巷 出 丘 
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图 7-14 神经 网 络 结构 


经 过 对 神经 网 络 的 训练 , 通过 它 可 以 辨识 出 控制 对 象 对 各 种 输入 信和 号 的 动态 酌 应 特性 。 
利用 神经 网 络 进行 系统 辨识 的 过 程 如 图 7-15 所 示 。 其 中 ，# 为 控制 信号 ， 为 为 期 望 响应 ， 
加 为 神经 网 络 响 应 。 神 经 网 络 预测 模型 应 该 具有 根据 系统 的 当前 控制 输入 和 输出 信息 来 预 
测 未 来 输出 值 的 功能 。 预 测 模型 建立 后 ， 接 下 来 就 是 构建 模型 顶 测 碎 制 器 ， 模 型 预测 控制 


过 程 如 图 7-16 所 示 。 
一 
En 
[7 
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医 7-15 系统 辨识 过 程 
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综 上 所 述 基于 神经 网络 的 预测 控制 系统 设计 的 主要 过 程 可 以 分 为 如 下 几 由 。 

(1) 构建 被 控 对 象 的 系统 模型 。 

《2) 彼 据 被 探 对 象 的 系统 模型 构建 神经 网 络 预测 模型 ， 即 神经 网 络 系统 辨识 过 程 。 

(3) 设 轩 非 线 任 优化 器 。 

《4) 建立 反馈 控制 条 统 模型 ， 对 系统 进行 仿真 ， 根 据 仿真 结果 ， 调 整 非 线 性 优化 器 的 
各 项 参数 设置 。 








恒 7-16 模型 预测 控制 过 程 


7.3.2 ”模型 预测 控制 实例 


神经 网 络 工具 箱 中 给 出 了 一 个 模型 预测 控制 的 实例 ， 该 实例 的 背景 为 水 反应 器 ， 它 是 
一 个 非 线 作 系统。 神经 网 络 工具 箱 结合 了 Simulink 模块 ， 实 更 了 该 系统 基于 神经 网 络 的 模 
型 预测 控制 ， 控 制 器 可 以 计算 控制 输入 ， 然 后 预测 系统 在 未 来 某 个 时 间 段 中 的 性 能 ， 

1. 背景 岂 述 

这 里 研究 的 背景 系统 是 一 个 水 反应 器 ， 如 图 7-17 所 示 。 该 系统 的 动力 学 模型 为 ， 
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其 中 成 为 液 面 高 度 ，C, (D 为 产品 输出 浓度 ，wi(D 为 浓缩 液 Cu 的 输入 流速 ，ws( 站 为 稀释 


液 避 ,的 输入 流速 。 输入 浓度 设 定 为 : Cu = 24.9，Cu =0.1。 消耗 常量 设置 为 后 =1, 总 =1。 





图 3-17 水 反应 器 


控制 的 目标 是 通过 调节 流速 w( 来 保持 产品 浓度 。 为 了 简化 演示 过 程 ， 不 妨 设 
t 人 0= 0.1。 出 于 简化 的 原因 ， 在 本 例 中 不 考虑 控制 液 面 高 度 拓 轨 。 
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工 模型 创建 
在 NEATLAB. 夫 仿 行 窗口 中 输入 piedeatr 后 按 回 车 妇 ， 或 者 到 MATLAB 的 Demos 标签 
页 申 , 在 aunal Netwao 上 kk 下 捷 到 Control Saslems 于 节 疝 ,名 后 昔 击 Fredetive Comrol of atank 


ESEIGnfaia) 的 链接 ， 出 现 如 图 了 te 所 示 的 窗口 ， 单 击 Open this madel 链接 ， 出 现 如 图 7 了 -多 
所 示 的 控制 模型 窗口 ， 






图 下 二 启动 窗口 


神 皮 同 综 撑 全 模型 巨 妈 在 图 人-15 所 示 的 窗口 中 了 。 图 中 的 课 色 部 分 囊 示 神 既 网 络 预 抽 
捷 制 器，RandonmReference 用 于 产生 随机 辆 六 信号 ，Plait 就 是 被 控 对 象 ， 这 里 为 水 反应 路。 
页 击 读 对 得 ， 所 出 现 窗 日 中 描述 的 肉 窜 为 读 系 统 的 Simulink 模型 ， 如 图 7 了 -3 所 未 。 由 于 
Simutink 的 原理 不 属于 本 书 的 内 容 ， 所 以 这 里 不 做 详细 介绍 ， 感 兴 舱 的 读者 可 参考 其 他 赣 
树 或 者 查阅 MIATLAE 的 大 助 广 档 。 

神经 同 络 预 铀 控制 器 模 埃 是 在 神经 网 络 工具 箱 中 生成 井 复制 过 来 的 ， 请 模块 的 Contml 
Signal 针 点 和 系 蝶 模型 的 输 六 结 避 相 连接 ，Plant Outpit 和 和 系 红 模型 的 得 出 结 点 相连 接 ， 
民 eferenee 由 点 连接 了 信号 长 生 巾 Random Referenee 的 久 出 凯 。 






和 二 旧 同 本 ms 站 人 站 1 和 科 一 本 
FE FE 晤 呈 号 一 个 本 1 本 本 5 


图 了 -19 控制 模型 留 口 
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图 了 起 来 反应 二 的 吧 mailank 栅 副 


双击 该 控制 里 概 块 ， 出 现 如 图 7-21 所 示 的 参数 设置 窗口 该 窜 口 用 于 设置 控制 器 的 大 数 ， 





图 了 21 撞 恒 时 的 志 数 设置 窗 申 


在 幸 窗 口 让 ， 可 以 调整 的 对 数 有 :NI，NMu， 56 和 权重 参 烽 P， 其 中 心 用 于 控制 最 优 性 ， 
它 决 定 了 一 个 成 功 的 优化 步骤 ， 在 性 能 上 需要 志 太 的 阻尼 。 此外， 在 该 窗口 中 ， 可 选择 用 
于 优化 计算 的 线性 最 小 化 算法 ， 还 可 设 定 在 每 个 采样 时 间 中 进行 事 少 次 造 代 优 化 算法 。 

该 窗口 带 有 和 解 县 功能 ， 当 把 鼠标 黎 到 某 个 参数 的 名 称 上 时 ， 就 会 出 现 对 于 该 参数 的 解 
县 ， 归 病 和 旭 下 ， 


Cosat Hanizon Ma 指定 上 时间 步 囊 ， 在 此 丧 间 内 预 抽 误 名 这 到 量 小 

Control Honizon 【Nui， 指定 时 间 步 数 ， 在 此 期 间 内 控制 增 量 达 到 最 小 ; 
finimnizatioo 必 Gutinei 可 以 从 几 个 屿 性 搜索 程序 中 选择 一 个 用 做 量 忱 化 算法 ， 
Comirol Weight Factor 5 p ): 在 性 能 函数 中 ， 妊 制 权重 因子 用 于 与 控制 增 量 的 平方 
和 相 票 ， 

Seiarch Parameter (oa Ji 这 十 参 数 诀 定 了 战 性 搜索 何 时 停止 ; 

Juerations Per Sample Time， 选 择 在 每 个 采样 时 间 中 优化 算法 造 代 的 次 数 ， 


下 面 是 对 于 4 个 技 钮 的 说 明 : 


【Plantc Idsntifieaiion3， 单 击 此 接 枉 可 打开 系 虾 峡 识 窗 日 ， 在 合用 控制 器 之 前 ， 系 
并 必须 先进 行 峡 识 ; 

【OK 【Apply 在 设 定好 控制 器 参数 以 后 ， 单 击 这 两 个 技 钮 的 任 一 个 都 可 以 将 
这 些 参数 导入 Simulink 模型 ， 


全 的 生化 赂 全 

理 【Cancell 取 销 刚才 的 设置 。 

3 夭 久 短 识 

单 击 对 话 杠 中 的 【Plant ldentification] 技 钥 ， 出 现 系统 办 识 僚 数 设 置 窗口 ， 如 图 7- 科 
所 未 。 袍 际 上 这 已 最 调用 了 MAILAB 的 系 屿 九 识 工具 箱 ， 

由 图 了 -到 可 见 ， 整 个 窗口 区 为 了 个 加 人 外， 最 上 耐 的 为 Network Arehiteetme， 用 于 确定 
阅 娩 的 早 构 ;， 中 间 的 为 Training Data， 用 于 建立 调 蝶 样本 履 据 ， 最 下 面 的 为 TrainimE 
Parameters， 用 来 设 定 训 蜂 套数， 

站 汪 人 人 其 亏 数 音义 归 师 如 下 : 

Si Hidden Layer 设置 在 系统 模型 网 络 第 一 层 中 的 神 既 元 数目 
SamnPLinETnienwal Teh 指定 程序 从 Simulink 本 到 中 对 类 数 撕 的 回击 ， 
Normalize Training Data， 指 定 是 否 使 用 Premmmx 函数 来 将 数据 标准 化 ， 
No.Delayed Flant lnpulsr 猪 定 曾 到 系统 同 络 模型 的 畏 六 延迟 

NoDelayed Plant Outpus， 指定 加 到 系统 网 将 模型 的 输出 延 退 ; 

Training Samples， 指 定 为 训练 而 产生 的 数据 点 的 数目 ; 

Masioon Elan input 指定 随机 输 人 的 最 夫 值 ; 

imini Plan Inpun 指定 项 机 输 关 的 量 小 值 ; 

Raxinurn Iniereal Waloe 【sse 指 宝 一 个 最 夫 的 间 届 ， 在 这 个 间隔 中 ， 随 机 输入 
将 保 尾 和 干 蛮 ， 

Rinimnan Timal Walue fsecy 指定 一 个 最 小 的 间 珊 ， 在 这 个 闸 隔 中 ， 随 机 得 六 
办 保 排 币 变 ， 

Limit Outfaui Daita 用 于 选择 系统 输出 是 理 罗 有 界 性 ， 

Rain PlantOutpot 指定 输出 的 量 云 值 ; 

fiairnmum Plan Cut 指定 输出 的 最 小 值 ; 

Siimuliak Flamtftodel， 指定 用 于 产生 训 蜂 履 据 的 模型 【mdl 立 件 ) 

Taiaing Bpochs: 指定 训练 选 代 的 欧盟 | 

Training Function;， 指定 训练 函数 ， 





图 7.22 系统 精 识 参数 设置 食品 


二 了 


硬 量 刺 辟 问 下 让 SNMATLAB:75wui 
和 Use Curment Weiehis 指定 是 否 选 择 当 前 的 权重 用 于 连 鳞 调 钰 ， 
看 Use Waid Daa 指定 是 否 记 择 作法 监 据 停 止 训练 ， 
二 Use Testing Data， 指定 在 训 乡 过程 中 测试 数据 是 否 被 扎 足 ， 
下 面 是 芙 于 接 钮 的 说 师 ; 
【eneraie Training Daa]l， 产生 用 于 同 纤 训练 的 蝎 掘 ， 
【Tapor Datal 从 工作 宝 间 或 者 一 个 支 件 中 导入 归 据 ; 
【Exper Datal， 兰 训练 数据 导出 副 工 作 空间 三 者 一 个 京 件 中 : 
【Teain Mefwaork3 开始 网络 模型 的 调 蝶 ， 训 绕 前 也 频 已 经 产生 或 者 导 闪 了 数据 ; 
【 口 戌 【Apply1 在 网 绪 槛 型 妈 过 如 练 后 ， 昔 击 这 两 沾 技 由 中 的 任 一 个 叔 可 以 将 
网 疼 导 坟 Smulink 异型 ， 
硬 下 Cancell 取 铺 刚才 的 设置 。 
机 上 所 村 ，[EGenerale Training Daa] 按钮 肝 于 产生 网 络 的 训练 样本 ， 单 击 灸 撤 仁 ， 
MATLAB 通过 Simulink 网 阁 模 晶 产 生 一 系列 的 随机 防 既 凡 号， 作为 网 将 的 训练 样本 ， 如 图 
7-24 所 示 。 





图 了 末 网 络 训 练 样 于 


图 了 29 市 有 两 个 接 乌 : 【Aceepr at】 和 【Refse Da 前 者 用 于 接收 斤 据 ， 好 果 认 
汐 这 些 数据 和 音 弄 ， 就 单 击 这 趟 技 伺 ， 和 理 则 ， 上 训 单 击 后 者 ， 重 轿 生 成 调 练 样本 。 这 里 认 轴 这 
些 数 乌 是 音 型 的 , 所 以 单 击 [Accept Daia] 拷 但 | 然后 在 系统 辨识 参数 设置 窗口 中 单 击 [Train 
Natwatk】 技 钥 ， 同 比 开 始 训 蝶 ， 训 蝶 的 时 间 和 过 程 与 所 考 择 的 训 蝶 函数 有 和 甘 ， 上 默认 的 训练 
丽 数 为 tiaialam， 训 纤 课 关 曲 线 如 图 724 所 示 ， 杆 型 训 绒 数据 如 轿 7-35 房 示 ， 模 型 梳 驻 数 
共生 图 了 26 所 示 。 

此 时 ， 可 以 单 击 【Train Network 了 技 钮 ， 利 用 同样 的 数据 对 网 阁 进行 此 持 如 颖 ， 也 可 
以 在 系 星 解 识 参 章 设置 窗口 中 单 击 【Ermiae Generated Datal 按钮 ， 擦 除 现 有 的 训练 歼 据 ， 
状 且 捷 册 以 上 步 障 重新 生成 训练 数据 对 同 络 进 行贿 练 。 当 烧 ， 也 可 以 试 为 读 模 型 已 经 非常 
铺 确 了 ， 从 而 全 受 这 沾 模型 。 
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图 ?7-25 网 阁 预 而 榨 人 天 所 需 的 出 练 数 据 
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图 ?26 网 络 据 而 控 僵 所 需 的 检验 败 据 
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4. 仿真 

在 接受 训练 好 的 模型 后 ， 回 到 如 图 7-22 所 示 的 系统 辨识 参数 设置 窗口 ， 单 击 夺 OK]】 
按钮 ， 将 该 模型 导入 到 NN Predictive Controller 模块 中 。 在 图 7-21 的 控制 如 参 数 设置 窗口 
中 单 击 【OK]】 按钮 ， 将 控制 器 敌 数 导入 到 NN Predictive Controller 模块 中 。 

返回 到 如 图 7-19 所 未 的 控制 模型 窗口 ， 在 【Simulation】 菜 单 中 输入 Start 命 念 开始 仿 
真 ， 仿真 结果 如 图 727 所 示 , 图 中 的 阶梯 信和 导 表 示 参 考 信 号 ,不 规则 的 曲线 表示 系统 输出 ， 
由 此 可 见 ， 和 控制 器 的 性 能 偿 是 不 鲁 的 。 
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图 72 参数 信号 及 系统 输出 


7.4 小 结 


本 章 主要 介绍 了 两 种 神经 网 络 控制 系统 : 模型 预测 控制 系统 和 反馈 线性 化 控制 系统 。 
首先 利用 MATLASB 的 神经 网 络 工具 箱 函 数 和 MATLAB 的 脚本 编程 功能 ， 针 对 一 个 简单 的 
非 线 性 系统 ， 实 现 了 反馈 线性 化 控制 ;然后 利用 神经 网 络 工具 箱 自 带 的 演示 系统 ， 详 细 介 
绍 并 分 析 了 基于 神经 网 络 模型 预测 控制 ， 

将 基于 神经 网 络 的 模型 预测 控制 策略 应 用 到 水 反应 器 中 ， 实 现 了 对 产品 浓 庆 的 有 效 控 
制 。 通 过 比较 ， 基 于 神经 网 络 控制 系统 的 控制 品质 和 和 鲁 棒 性 都 优 于 传统 的 被 度 控 制 系统 。 
基于 神经 网 络 的 模型 预测 控制 策略 为 具有 延迟 和 惯性 环节 的 工业 控制 对 象 的 控制 系统 设计 
提供 了 一 种 新 的 思路 。 

对 于 反馈 线 性 化 控制 来 说 ， 首 先 建 立 一 个 神经 网 络 系统 模型 。 接 着 ， 使 用 这 个 系统 模 
型 来 训练 一 个 神经 网络 控制 器 ， 迫 使 系统 输出 跟踪 参考 模型 的 输出 。 这 种 控制 器 的 在 线 计 
算 时 间 最 少 。 


He 


第 8 章 基于 神经 网 络 的 故障 诊断 


随 着 现代 科学 技术 水 平 的 日 瘟 提 高 ， 净 其 是 计算 机 科学 和 控制 科学 的 飞速 发 展 ， 使 得 
系统 的 规模 和 复杂 程度 迅速 增加 ， 设 备 的 安全 性 和 可 靠 性 问题 越 来 越 突出 。 安 全 保障 已 经 
逐 关 成 为 系统 运行 的 一 个 重要 组 成 部 分 ， 系 统 中 出 现 的 某 些 微小 故障 者 不 能 及 时 徐 测 并 排 
除 ， 脖 有 可 能 造成 整个 系统 的 失效 、 次 痪 ， 甚 至 导致 巨大 的 灾难 性 后 时。 因此 ， 人 们 总 是 
期 望 建立 一 套 监 测 、 预 警 、 赛 错 和 维修 机 制 ， 伴 和 随 系统 运行 的 全 寿命 周期 ， 防 止 和 杜绝 影 
响 系 统 正常 运行 的 故障 的 发 生 和 发 展 。 

国内 外 大 量 的 文献 资料 表明 ， 在 实际 需求 的 牵引 下 ， 故 障 诊断 技术 的 应 用 领域 越 来 越 
广泛 ， 已 经 从 传统 的 机 械 系 统 和 电子 系统 ， 淡 透 到 机 电 一 体 化 系统 、 工 业 自 动 化 系统 、 计 
算 机 系统 ， 以 及 各 种 广泛 意义 上 的 动态 系统 ， 包 括 目标 识别 系统 、 组 人 台 导 航 系 统 等 。 随 着 
牺 理 学 、 数 学 等 基础 科学 的 不 断 进步 ， 以 及 控制 理论 、 信 息 科 学 等 应 用 科学 的 不 断 发 展 ， 
为 故障 诊断 提供 了 允 种 技术 手段 ， 成 为 故障 诊断 技术 发 展 的 推动 力量 ， 因 此 ， 系 统 故障 诊 
断 技术 越 来 越 呈 现 出 更 宽泛、 更 深入 和 更 有 效 的 发 展 态 势 。 

神 径 网 络 技术 的 出 现 ， 为 故 简 诊断 问题 提供 了 一 称 新 的 解 次 途径 ， 特 别 是 对 于 在 实际 
中 难以 建立 数学 模型 的 复杂 系统 ， 神 经 网 络 更 显示 出 其 独特 的 作用 。 总 的 来 说 ， 神 经 网 络 
之 所 以 可 以 成 功 地 应 用 于 故障 诊断 领域 ， 主 要 基于 以 下 3 个 方面 的 原因 : 

(1) 训练 过 的 神经 网 络 能 存储 有 关 过 程 的 知识 ， 能 直接 从 历史 均 障 信息 中 学 习 。 可 以 根 
据 对 象 的 日 常 历史 数据 训练 网 络 , 然后 将 此 信息 与 当前 测量 数据 进行 比较 , 以 确定 改 障 的 类 型 。 

(2》 神经 网 络 具有 泪 除 噪声 及 在 有 了 噪声 情况 下 得 出 正确 结论 的 能 力 ， 可 以 训练 人 工 神 
经 阿 络 来 识别 故障 信息 ， 使 其 能 在 噪声 环境 中 有 效 地 工作 ， 这 种 滤 除 噪声 的 能 力 使 得 人 工 
神经 网 络 适 合 在 线 故 障 检测 和 诊断。 

(3》 神经 网 络 具 有 分 辨 故障 原因 及 故障 类 型 的 能 力 。 

本 章 主 要 内 容 有 : 

志和 神经 网 络 与 故障 宰 式 识别 
基于 BP 网 络 和 Elman 网 络 的 齿轮 箱 故 障 诊断 
基于 SOM 网 络 的 回 热 系 统 故障 诊断 
基于 概率 神经 网 络 的 故障 诊断 
基于 BP 网 络 的 设备 状态 分 类 器 设计 
基于 RBF 网 络 的 船用 柴油 机 故障 诊断 


8.1 神经 网 络 与 故障 模式 识别 


广义 地 讲 ， 故 障 可 以 理解 为 系统 的 任何 异常 现象 ， 使 系统 表现 出 所 不 期 望 的 特性 ， 
通常 表现 为 系统 的 某 些 〈 个 ) 重要 变量 或 特性 候 离 了 正常 范围 ， 人 们 对 故障 的 认识 起 初 
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是 通过 选择 敏感 特性 和 进行 简单 比较 实现 的 ， 这 对 于 简单 系统 容易 做 到 ， 而 对 于 复杂 系 
统 和 复杂 现象 ， 就 涉及 到 故障 模式 和 正常 模式 的 识别 问题 ， 模 式 建立 及 其 识别 的 复杂 性 
主要 取 交 于 系统 的 复杂 性 和 人 们 的 认识 水 平 。 人们 会 通过 获取 各 种 先 验 信息 ， 建 立 设备 
正常 /故障 ， 以 及 各 种 不 同 故障 的 祥 板 模式 。 故 障 诊断 时 ， 根 据 不 同 的 故障 征兆 完成 模 
式 上 映射 过 程 。 


8.1.1 常用 的 模式 识别 方法 


自然 界 的 事物 和 现象 一 般 可 分 为 雪 个 相似 , 但 又 不 完全 相同 的 群体 或 个 体 组 成 的 类 别 ， 
大 们 把 这 样 的 类 别称 为 模式 类 或 模式 ， 而 把 其 中 每 个 事物 或 现象 称 为 该 模式 的 一 个 样本 。 
同类 的 样本 彼此 相似 ， 具 有 某 些 共同 的 特征 ， 不 同类 的 样本 彼此 互 不 相似 ， 所 谓 模式 识别 
就 是 从 模式 空间 到 类 别 隶 属 空间 的 正确 喘 射 。 

故障 诊断 中 经 常用 到 以 下 模式 识别 方法 : 

(1) 统计 分 类 方法 。 该 方法 是 利用 了 各 模式 类 的 分 布 特征 ， 即 直接 利用 各 类 的 概率 密 
度 函 数 、 后 验 概 率 等 ， 或 隐 含 地 利用 上 述 概 念 进行 分 类 识别 。 按 照 判 别 准 则 来 划分 统计 分 
类 方法 ， 包 括 最 小 误 判 概率 准则 和 最 小 损失 判决 规则 等 。 

(2》 聚 类 分 类 方法 。 为 了 避免 估计 概率 密度 的 困难 , 可 以 采用 该 方法 。 在 一 定 条 件 下 ， 
根据 梯 本 空间 的 相似 性 把 祥 本 集 分 为 若干 子 集 ， 结 果 应 是 某 种 表示 莫 类 质量 的 准则 函数 为 
最 大。 常用 样本 的 相似 性 测度 包括 瑟 离 指标 和 角度 指标 。 聚 类 分 类 方法 是 一 种 无 监督 的 学 
习 方 法 ， 就 是 不 利用 样本 的 类 别 属 性 短 识 ， 只 根据 祥 本 的 相似 性 进行 分 类 的 方法 。 这 种 方 
法 的 前 提 是 ， 同 美 样本 的 特征 向 量 相互 靠近 而 不 同类 样本 的 特征 向 量 距 离 要 大 得 多 。 常 用 
的 方法 包括 CC- 均 值 法 和 IODATA 算法 。 

《3) 模糊 模式 识别 。 该 方法 利用 模糊 数学 的 理论 和 方法 来 解决 模式 识别 问题 ， 因 此 适 
用 于 分 类 识别 对 象 或 要 求 的 识别 结果 具有 模糊 性 的 场合 。 目 前 ,模糊 模式 识别 的 方法 很 多 ， 
最 简单 、 最 常用 的 就 是 最 大 隶属 度 原 则 。 

在 传统 的 模式 识别 技术 中 ， 模 式 分 类 的 基本 方法 是 利用 判别 函数 来 划分 每 个 类 别 。 在 
很 多 情况 下 ， 特 别 是 对 于 线性 不 可 分 的 复杂 决策 区 域 ， 判 别 函 数 的 形式 也 就 格外 复杂 。 而 
且 由 于 全 面 的 典型 参考 模式 样本 是 不 容易 得 到 的 ， 但 如 果 采 用 概率 模型 ， 会 损失 模式 识别 
的 精度 。 


8.1.2 ”神经 网 络 在 故障 模式 识别 中 的 应 用 


神经 网 络 作为 一 种 自 适 应 的 模式 识别 技术 ， 并 不 需要 预先 给 出 有 关 模 式 的 经 验 知识 和 
判别 函 数 , 它 通过 自身 的 学 习 机 制 自 动 形成 所 要 求 的 决策 区 域 。 网 络 的 特性 由 其 拓扑 结交 、 
神经 元 特性 、 学 习 和 训练 规则 所 决定 。 它 可 以 充分 利用 状态 信息 ， 对 来 自 于 不 同 状态 的 信 
息 逐 一 进行 训练 而 获得 某 种 映射 关系 。 而 且 网 络 可 以 连续 学 习 ， 如 果 环 境 发 生 改 变 ， 这 种 
映射 关系 还 可 以 自 适应 地 进行 调整 。 

因此 ， 神 经 网 络 由 于 自身 的 特性 ， 在 故障 模式 识别 领域 中 有 着 越 来 越 广泛 的 应 用 。 下 
面 以 单 隐 层 BP 网 络 为 例 ， 介 绍 基于 神经 网 络 的 故障 诊断 的 方法 和 特点 。 其 中 ， 网 络 的 输 
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入 结 点 对 应 着 故障 征 光 条 出 结 点 对 应 着 故障 原因 ， 贡 光 利用 一 组 故障 样本 对 网 络 进行 训 
练 ， 以 确定 网 络 的 结构 〈 中 间 晨 的 传递 函数 和 神经 元 数目 ) 和 参数 〈 神 经 元 之 间 的 连接 权 
值 和 阅 值 )。 网 络 训 练 完毕 后 ， 故 障 的 模式 分 类 就 是 根据 给 定 的 一 组 征兆 ， 实 现 征兆 集 到 故 
障 集 之 间 的 非 线性 映射 的 过 程 。 

利用 神经 网 络 进行 故障 模式 识别 具有 以 下 特点 : 

Ci 可 用 于 系统 模型 未 知 或 系统 模型 较为 复杂 ， 以 及 非 线性 系统 的 故障 模式 识别 。 

《2) 兼 有 故障 信号 的 模式 变换 和 特征 提取 功能 。 

(3) 对 系统 含有 不 确定 因素 、 吗 声 及 输入 模式 不 完备 的 情况 下 不 太 人 敏感 。 

(4) 可 用 于 复杂 多 模式 的 故障 诊 斯 。 

55) 可 用 于 离线 诊断 ， 也 能 适应 实时 是 测 的 要 求 。 

典型 的 基于 神经 网 络 模式 识别 功能 的 诊断 系统 结构 如 图 8-1 所 示 。 
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图 8-1 基于 神经 网 络 模式 识别 功能 的 诊断 系统 结构 


8-1 中 , 基于 神经 网 络 的 诊断 过 程 分 为 两 步 。 首 先 ， 基 于 一 定数 量 的 训练 样本 集 〈 通 
常 称 为 “征兆 一 故障 ”数据 集 ) 对 神经 网 络 进行 训练 ， 得 到 期 望 的 诊断 网 络 : 其 次 ， 根 据 
当前 诊断 输入 对 系统 进行 诊断 ， 诊 断 的 过 程 即 为 利用 神经 网 络 进行 前 向 计算 的 过 程 。 在 学 
习 和 诊断 之 前 ， 通 常 需要 对 诊断 原始 数据 和 训练 样本 数据 进行 适当 的 处 理 ， 包 括 预 处 理 和 
特征 选取 /提取 等 ， 目 的 是 为 诊断 网 络 提供 合适 的 诊断 输入 和 训练 样本 ， 此 外 ， 尽 管 神经 网 
络 和 传统 的 故障 诊断 是 两 种 不 同 的 诊断 方法 ， 但 两 者 是 紧密 联系 在 一 起 的 。 如 采用 小 波 分 
析 等 数据 处 理 方法 ， 可 以 为 神经 网 络 诊断 提供 可 以 利用 的 特征 向 芥 。 

前 向 BP 网 络 和 RBF 网 络 的 学 习 算 法 属于 有 教师 型 的 。 这 种 算法 模型 具有 很 好 的 推广 
能 力 ， 用 于 放 障 模式 识别 的 效果 比较 好 。 训 练 好 的 BP 网 络 和 RBF 网 络 计算 速度 快 、 内 存 
消耗 低 ， 可 用 于 实时 监测 和 诊断 。 但 是 这 两 种 模型 要 求学 习 样 本 具有 一 定 的 致密 性 、 韦 爵 
性 和 相 窜 性， 在 实际 工程 中 ， 有 时 候 获得 这 样 的 样本 比较 困难 。 利 用 BP 网 络 进行 故障 诊 
斯 的 一 般 步 骤 和 注意 事项 如 下 ; 

(1) 确定 合理 的 网 络 结构 和 规模 ,尤其 是 网 络 中 间 层 神经 元 个 数 的 选择 是 网 络 结构 确 
定 和 网 络 性 能 的 关键 。 

(2) 确定 训 练 样本 集 和 测试 集 。 训 练 样本 集 用 于 对 网 络 进行 训练 ， 而 测试 集 用 于 监测 
网 络 训练 的 效果 和 推广 能 力 。 一 般 来 说 ， 训 练 样本 集 不 仅 应 全 面 涵盖 所 有 故障 模式 类 的 数 
据 ， 还 应 具有 一 定 的 代表 性 ， 同 时 还 必须 保证 学 习 的 有 效 性 。 测 试 样本 集 的 选择 应 该 满足 
“ 议 及 检验 〈《cross validation)” 的 大 则 。 

(3) 根据 训练 样本 集 对 网 络 进行 训练 ,经 过 测试 的 训练 结果 即 为 神经 网 络 故 障 诊断 知 
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识 库 ， 

《4) 根据 诊断 输入 ， 利 用 BP 网 络 进行 诊断 。 

ART 网 络 和 SOM 网 络 均 属 于 无 救 师 的 竟 争 学 习 的 自 组 织 网 络 。ART 了 网络 可 以 在 线 
学 习 ， 边 学 习 边 记忆 。 给 网 络 提供 一 组 样本 ， 它 自动 形成 一 组 分 类 模式 。 如 果 一 个 新 的 输 
六 不 能 归 入 任何 一 个 已 经 形成 的 模式 类 中 ， 网 络 又 自动 生成 一 个 新 的 模式 类 ， 同 时 如 果 新 
的 输入 在 已 经 形成 的 模式 类 中 可 以 找到 一 个 相似 的 类 ， 那 么 这 个 输入 归 人 该 模式 类 ， 且 网 
络 向 更 接近 这 个 输入 的 方向 进行 调整 。SOM 网 络 采 用 离线 的 方式 进行 学 习 ， 它 能 够 很 好 地 
进行 特征 提取 ， 适 用 于 用 做 最 邻近 分 类 器 。 目 前 ， 这 两 类 网 络 在 故障 诊断 中 应 用 还 比较 少 。 
虽然 这 类 模型 的 推广 性 能 没有 BP 网 络 和 RBF 网 络 的 好 ， 但 它们 具有 的 自 组 织 和 自 适 应 特 
性 为 在 复杂 系统 故障 诊断 中 的 应 用 黄 定 了 坚实 的 基础 。 


82 基于 BP 网 络 和 Elman 网 络 的 齿轮 箱 故 障 诊断 


本 节 以 某 型 号 拖拉 机 的 齿轮 箱 为 工程 背景 , 利用 MAILAB 的 神经 网 络 工具 箱 , 介绍 基 
于 BP 网 络 和 Elman 网 络 进行 齿轮 箱 故 障 诊断 的 过 程 。 


8.2.1 ”工程 描述 


拖拉 机 变速 箱 是 整 机 进行 减速 增 扭 的 部 件 , 它 受 扭转 和 拉 压 两 种 载荷 的 综合 作用 ， 
受 力 过 程 非常 复杂 ， 因 此， 拖拉 机 的 很 多 故障 出 现 于 变速 箱 中 齿轮 及 传动 轴 等 机 械 系 
统 中 。 据 统计 ， 以 齿轮 为 代表 的 变速 箱 故 障 发 生 率 占 据 除 发 动机 故障 以 外 的 其 他 所 有 
故障 的 59 色 一 70%。 在 非 拆 伸 状态 下 ， 传 统 的 齿轮 箱 故 障 诊断 手段 往往 依 束 于 专家 的 
经 验 判 断 。 但 是 ， 由 于 齿轮 箱 是 一 种 非常 复杂 的 传动 机 构 ， 它 的 故障 模式 和 特征 量 之 
间 是 一 种 非常 复杂 的 非 线性 关系 ， 再 加 上 齿轮 箱 在 不 同 工 况 下 的 随机 因素 ， 所 以 专家 
的 经 验 并 不 能 解决 所 有 的 诊断 问题 。 而 应 用 神经 网 络 可 以 有 效 地 避免 这 个 问题 。 神 经 
网 络 的 自 适应 、 自 学 习 和 对 非 线性 系统 超 强 的 分 析 能 力 注定 它 可 以 在 齿轮 箱 的 故障 诊 


断 中 大 时 身手。 
8.2.2 输入 和 目标 向 量 设计 





神经 网 络 输入 的 确定 实际 上 就 是 特征 量 的 提取 ， 对 于 特征 量 的 选取 ， 主 要 考虑 它 是 牛 
与 故障 有 比较 确定 的 因果 关系 ， 如 果 输 入 /输出 征兆 参数 和 故障 没有 任何 关系 ， 就 不 能 建立 
它们 之 间 的 联系 。 

统计 表明 ， 此 轮 箱 改 障 中 有 60% 左 右 都 是 由 齿轮 故障 导致 的 ， 所 以 这 里 只 研究 齿轮 故 
障 的 诊断 。 对 于 齿轮 的 故障 ， 这 里 选取 了 括 域 中 的 几 个 特征 量 。 磋 域 中 齿轮 故障 比较 明显 
的 是 在 吐 合 频率 处 的 边缘 带 上 。 所 以 ， 在 频 域 特征 信号 的 提取 中 选取 了 在 2、4、6 档 时 ， 


在 1、2、3 轴 的 边 频带 族 广 土 矿 处 的 幅 值 4， 、 上 生生 ， 其 中 上 表示 沧 轮 的 哮 合 频 
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哇 ， 子 是 御 的 转 顿 ， hh=l2.3，fa46 雪 示 相 位 ， 上 1.23 妻 示 轴 的 序号 ， 二 于 在 工 输 和 3 


轴 上 有 两 对 内 轮 柄 音 ， 所 以 用 1、2 分 别 表 示 丙 个 咕 合 频率 。 这 样 一 来 ， 网 络 的 输入 就 
是 一 个 15 维 的 向 量 ， 这 些 数据 具有 不 同 的 单位 和 量 级 ， 所 以 在 输入 神经 网 络 之 前 应 语 
首先 进行 归 一 化 处 理 ， 表 久 1 给 出 了 输入 向 量 的 9 组 数据 ， 它 们 都 是 已 经 骨 一 化 后 的 样 
本 数据 。 


囊 &1 雷 轮 稍 状 态 样本 数 电 


,1 让 由 JE 


和 二 9 和 0 有 本 了 人 寺 机 于 各. 于 于 车 有 和 让 了 1 让 生计 种 ET 国 


卫生 
村 外 瑚 而 而 3 二 9 站 页 站 3 和 下 7 辣 5 和 0 OO 





榈 下 来 确 定 网 络 的 输出 模式 ， 由 于 齿轮 包 括 3 种 故障 模式 ， 因 此 可 以 采用 如 下 的 形式 
来 改 示 输出 

无 赵 障 ; 有 全 避 3 

些 根 列 阁 ; 50，1，D 

瞩 上 证 《全 ，D，1 52 


823 BP 网 络 设计 


这 里 军用 BE 网 北 进 行 故障 话 断 。 
1、 网络 创 建 
BF 网 阁 模 型 结构 的 确定 有 两 条 比较 重要 的 指导 原则 ， 
(47 对 于 一 般 的 模式 识别 间 题 ， 三 屁 同 络 可 以 很 好 地 牙 解 志 。 


235 
ES 


En 本 亲 丰 本 二 SNMATLAB5aii 
【21 三 屋 网 络 中 ， 陷 音 屋 挤 经 元 个 灼 态 和 输入 层 神经 元 伞 数 击 之 间 有 以 下 和 近 恨 甘 系 ， 


正三 加 十] 


由 此 ， 可 按照 如 下 的 方式 设计 网 络 ， 网 络 的 输入 层 神经 元 个 数 为 15 个， 和 输出 层 杆 上 元 
个 整 为 了 3 站 ， 攀 言 屋 的 神经 元 个 数 近 亿 为 31 个 。 隐 吝 层 的 昼 经 元 个 数 间 下 是 团 定 的 ， 需 要 
经 过 实际 调 练 的 检验 来 不 断 调整 。 

可 利用 以 下 代码 来 世 建 刚刚 设计 的 网 络 。 同 络 的 输入 向 和 量 范围 为 [Qil]， 隐 言 层 神经 元 
的 传道 函 孝 采用 8S 型 正切 本 数 tansig， 输 出 层 神 时 元 传递 丽 数 采用 S 型 对 数 函 数 logsi， 这 
是 由 于 输出 模式 为 0 =- 1， 正好 福 是 网 站 的 蛤 出 要 求 。 





其 中 ， 变 量 threshold 定义 了 输入 向 量 的 最 大 值 和 最 小 值 。 网 络 参 数 如 开 8.2 所 示 。 





2 网 训 对 与 测试 

癌 阁 训 栋 过 程 是 一 个 和 丰 断 修正 松 值 和 赣 情 的 过 程 ， 通 过 调整 ， 网 阁 的 辆 出 说 禾 所 到 
最 小 ， 清 足 裤 际 应 用 的 要 求 。 

训 开 画 数 taialan 是 利用 Lewemberg-Marduandi 算法 对 网 络 进 行 训 练 的 ， 通 过 以 下 代码 
调用 tmainlma 同 络 的 调 练 大 数 设置 徊 表 8& 3 所 示 。 






其 中 ，P 和 T 合 别 为 网 络 的 输 六 向 量 和 目标 向 量 ，P 是 从 表 &.1 中 得 出 的 。 


可 见 ， 经 过 29 次 训 绒 后 ， 网 络 的 性 能 就 达到 了 要 求 ， 如 图 8.2 所 示 。 收 效 速 度 快 的 一 
个 重要 原因 在 于 学 习 速 率 的 设 定 值 比较 大 。 


和 丁丁 四 LT | 


Fe ga 证 伟 加 全 下 9 ,让 5 让 二 和 丰 四 | 





图 82 训 蝶 由 果 


接 下 来 需要 对 调 练 好 的 网 络 进行 副 试 。 抽 取 3 组 新 的 数据 作为 网 络 的 铀 试 输入 娄 据 ， 
惠 呈 1 测试 米 搁 


机 天 1 吉 二 全 和 和 9 二 | 1 
TREE 本 二 一 
本 9 下 1 TH 3801 页 下 13599 TOO 本 | 二 53 

IE OSI 
让 问 二 人 ia 人 08 Di 站 -区 97 人 .306 下 让 上 
和 1 1331 有. 工 荆 1 让 2034 











按照 欧式 范 数 理论 ， 这 3 次 测试 的 误差 分 别 为 Q0382; 0.2343 和 | 0.0527， 可 以 看 出 ， 
这 些 讽 差 是 非常 小 的 。 国 此 ， 可 以 判定 ， 公 过 训练 后 ， 网 络 是 完全 可 以 和 请 足 齿 轮 箱 太 障 认 
断 的 要 求 的 。 

本 实例 的 完整 MATLAB 代码 如 FF 


2 
ET 


8&.24 Elman 网 络 设计 


BP 网 络 有 着 很 强 的 非 线性 苞 射 俊 力 ， 在 故 陈 诊断 中 的 应 用 也 非常 成 功 ， 但 是 ，BP 网 
络 是 一 种 前 向 的 神经 网 络 ， 相 对 于 反馈 型 的 网 络 来 说 ， 收 徊 速度 相对 较 慢 ， 而 且 有 可 能 收 
将 到 局 部 极 小 点 。 因 此 ， 这 里 尝试 利 用 Bman 网 络 再 次 对 上 壕 实 例 进行 故障 诊断 ， 井 比较 


1. 网 络 创 建 


由 于 单 陷 层 的 Blman 网 络 的 功能 已 经 非常 强大 ， 因 此， 这 里 采用 单 陷 层 的 网 络 就 是 铝 

了 。 最 影响 网 络 性 能 的 是 隐 舍 层 神经 元 的 个 数 ， 而 这 又 是 比较 难以 确定 的 ， 

由 于 蛤 入 向 量 的 维 数 为 14， 因 此 输入 层 神经 元 的 个 数 应 该 为 15: 而 输出 向 量 的 骏 数 为 
3， 则 输 幢 层 神 到 元 的 个 数 就 为 3。 许 对 考虑 网 阁 的 性 能 和 速度 ， 将 陷 舍 层 神经 元 的 个 数 设 
定 为 站。 利用 以 下 代码 创建 一 个 Blman 网 阁 : 








1 
甚 中， 正和 工 和 从 别 为 输 六 向 量 和 目标 了 向 量 ， 

人 疯 纤 训 蜂 及 应 用 

利用 态 下 得 码 对 网 络 进 行 训 媒 ， 





可 网 ， 野 过 142 次 训练 后 ， 网 络 误差 达到 要 求 。 如 图 8-3 所 示 ， 网 络 的 训 拓 误差 曲线 
比较 平 清 。 


户 和 和 SF 二 站 HITR Pa 库 局 可 1 


时 





图 8.3 训练 后果 
利用 测试 数据 P_iest 对 网 阁 进 行 仿真 : 





EEC 二 
结果 为 : 






可 以 看 出 , Elman 网 络 也 崔 确 地 识别 出 了 所 有 的 克 障 类 型 。 相对 于 BP 网 站 来 说 , Blman 
赣 络 的 识别 误 盖 三 大 一 些 ， 但 这 并 不 影响 卖 际 应用 。 另 外 ， 四 于 在 Blman 网 络 中 引 六 了 反 
乌 ， 所 以 网 络 的 调 练 误差 机 线 要 比 BP 网 络 平 请 。 
3 由 


国人 
生 
- ， 全面 本 = - 各 画 = 
aa 站 了 - -二 站 了 = 届 下 本 
on 






8.3 基于 SOM 网 络 的 回 热 系 统 故障 诊断 


回 热 系统 是 火力 发 电机 组 热力 系统 中 最 主要 、 最 复杂 的 系统 ， 随 着 机 组 容量 和 参数 的 
提高 ， 热 力 系 统 特别 是 回 热 奈 统 对 整个 机 组 的 安全 性 和 经 评 性 的 影响 越 来 战 大 。 因 此 ， 应 
根据 心 感 姐 测 得 的 各 种 钛 态 参 数 来 判断 回 热 系统 的 运行 状态 ， 一 旦 发 生 异 党 就 立即 进行 诊 
断 ， 玉 时 找 出 故障 原因 。 

采用 自 组织 特 年 腺 射 人 工 神 既 网 络 【SOM) 能 粮 好 地 完成 这 种 识别 任务 。 自 组 织 特征 
且 射 人 工 神 既 网 络 采 用 的 是 无 教师 学 习 的 自学 习 方 式 ， 无 需 在 训练 或 学 习 过 程 中 预先 指明 
这 赴 训 练 输入 条 量 的 所 故 类 别 。 当 昌 入 某 一 类 别 的 矢量 时 ， 神 经 网 络 中 的 一 个 神经 元 特使 
在 其 输出 赐 产 生 最 夫 值 ， 而 其 他 的 神 皮 元 具有 最 小 输出 值 。 所 以 ， 该 同 络 能 够 根据 最 大 慎 
的 神经 元 的 位 置 来 判断 输入 矢量 所 代表 的 故障 ， 本 节 党 试 将 自 组 织 特征 栅 射 神经 网 阁 耕 用 
在 回 的 系统 的 故障 德 断 中 。 


g.31 有 最 


根据 回 热 系 统 的 运行 经 验 及 现场 条 性 ， 利 用 9 个 运行 参数 担 取 故障 征兆 ， 归 纳 得 到 13 
种 【正常 状态 亦 作为 一 种 入 式 ) 主要 故障 的 样本 特征 模式 ， 如 表 8B-5 所 示 。 这 里 需要 特别 
指出 的 是 ， 在 克 障 征兆 参数 的 处 理 上 ， 由 于 各 个 参数 在 系统 中 具有 不 同 的 特点 ， 三 鉴 生 可 
能 的 故障 时 ， 它 们 的 变化 范围 和 方向 都 千古 相同。 又 因为 挤 经 网 络 对 办 六 样本 有 归 一 化 的 
要 求 ， 因 此 对 瞧 数 的 变化 方向 和 程度 的 表 未 需要 进行 慎重 的 处 理 . 

这 里 根据 各 个 参数 的 和 不同 特 点 来 表示 它们 的 变化 范围 和 程度 , 考 瞄 到 关 数 铀 点 的 访 动 ， 
将 只 能 变 夫 或 变 小 的 参数 的 正常 值 设 定 为 站 25 和 人 75， 而 将 可 能 双向 变化 的 春 数 的 正常 值 
设 定 为 各 $。 这 样 ,作为 神经 网 络 的 训 卉 样本 , 大 多数 的 参数 在 归 一 化 后 其 变化 范围 加 太 了 ， 
重大 地 改善 了 训练 的 收 黎 性 。 





7 | 上 吧 
有 | am | no | nn | ogg | ia | nu | 0 | It | 
FiE 洛 | 6 | ur | us | om | un | ma | os | om | no | 


8.3.2 SOM 网 络 设计 





网 络 输 六 向 量 元 素 的 个 数 为 9 个 ， 昔 围 都 在 fo,i] 之 间 。 为 了 提高 网 络 驶 射精 度 ， 允 网 
绪 的 竞争 层 设计 为 一 个 gxg 的 二 纵 平 面 。 





其 中 ，P 注 网 络 的 输入 向 量 。 
接 下 来 对 网 络 进行 训练 ， 





_ 调 练 结果 为 ， 





上 还 结 果 可 以 在 图 8-4 中 表示 出 来 。 由 图 可 见 ， 经 过 100 次 训 蝶 后， 训练 好 的 网 络 将 
所 有 的 故障 模式 进行 了 成 功 的 分 类 。 





图 84 调 几 后 的 3DM 网 络 恰 出 


这 时 ， 如 果 输入 一 个 新 的 故障 模式 ， 竟 争 层 的 神 皮 元 开始 竞争 ， 汕 活 与 之 最 为 接近 的 
神经 元 ， 从 而 实现 正确 的 分 类 。 一 旦 故障 的 类 型 确定 ， 网 络 的 故障 污 断 功能 也 就 实现 了 ， 
网 络 竞争 层 挤 经 元 的 个 数 和 排列 对 于 网 络 性 能 来 说 是 猩 重 要 的 ， 如 果 村 经 元 个 数 比 较 


| 
HE， 


4 .有 | 全 中 
少 ， 可 能 就 无 法 对 输入 模 武进 行 正确 的 分 类 还 是 上 面 的 例子 ， 将 间 争 展 设置 为 4X4 的 二 
奴 平 面 阵列 ， 其 他 设 定 套数 者 生变， 姬 后 对 网络 进行 训 蝶 并 仿真 。 
输出 结果 为 : 


可 役 ， 网 络 将 故障 模式 入 和 1 和 颁 为 一 类 ， 特 故障 模式 色 和 工 分 为 一 并 ， 所 以 说 ， 访 网 
络 的 分 类 性 能 是 比较 差 的 ， 只 能 做 初级 的 分 类 。 

如 果 出 现 这 种 情况 ， 即 使 调整 训练 次 数 ， 也 无 法 彻底 改变 网 络 的 分 类 性 能 。 比 如 ， 和 将 
网 络 训练 次 数 设 定 为 2000， 这 时 的 分 桨 结果 为 : 


与 上 面 的 分 类 结果 是 一 样 的 ， 因 此 ， 只 有 调 束 网 络 总 争 层 的 辣 构 才 可 以 提高 网 络 的 性 
能。 而 竞争 层 结构 的 调整 需要 不 断 地 实 驻 。 
本 实例 的 MATALB 代码 为 ， 





8.4 基于 概率 神经 网 络 的 故障 诊断 


概率 神经 网 络 PNN 是 一 种 性 能 良好 的 分 类 神经 网 络 , 由 于 它 直接 考虑 样本 空间 的 概率 
特性 ， 以 样本 空间 的 典型 样本 作为 隐 含 层 的 结 点 ， 一 经 确定 就 不 需要 进行 训练 ， 只 楼 随 实 
际 问题 进行 样本 的 追加 就 可 以 了 ， 而 且 PNN 具有 全 局 优化 的 特点 。 因 此 ，PNN 已 经 广泛 
被 应 用 于 故障 诊断 领域 。 


8.4.1 ”概述 


概率 神经 网 络 PNN 是 一 种 可 用 于 模式 分 类 的 神经 网 络 , 其 实质 是 基于 贝 叶 斯 最 小 风险 
准则 发 展 而 来 的 一 种 并 行 算法 ， 目 前 已 经 在 雷达 、 心 电 图 仪 等 电子 设备 中 获得 了 广泛 的 应 
用 。PNN 与 BP 网 络 相 比 较 ， 其 主要 优点 为 ; 

《1) 快速 训练 ， 其 训练 时 间 仅 仅 略 大 于 读 取 数据 的 时 间 ， 

《2) 无 论 分 类 问题 多 人 么 复 加 ， 只 要 有 足够 多 的 训练 数据 ， 就 可 以 保证 获得 由 时 斯 准则 
下 的 最 优 解 。 

(3) 允许 增加 或 减少 训练 数据 而 沪 需 重新 进行 长 时 间 的 训练 。 

PNN 的 结构 如 图 3-27 所 示 ， 这 种 PNN 的 层次 模型 是 Specht 根据 中叶 斯 分 英 规 则 与 
Parzen 的 概率 密 庆 函 煞 提 出 的 。 在 训练 网 络 时 ， 网 络 直接 存储 训练 样本 疝 量 为 网 络 的 模式 
样本 商量 ， 而 不 做 任何 的 修改 ， 只 需 对 高 斯 函数 的 平滑 因子 进行 经 验 式 统计 的 估计 ， 过 程 
极为 简单 :在 网 络 工 作 时 ， 待 识别 样本 三 由 和 输入 层 直 访 送 到 模式 层 各 个 类 别 单 元 中 ， 在 模 
式 单 元 中 进行 向 量 束 与 殉 的 点 积 。 完 成 非 线性 处 理 后 ， 再 送 入 求 和 层 中 : 求 和 层 中 各 单元 
只 与 相应 类别 的 模式 单元 相连 ， 并 且 依 据 Parzen 方法 求 和 佑 计 各 类 的 概率 ;在 决策 层 中 ， 
根据 对 输入 向 量 的 概率 估计 ， 按 贝 叶 斯 分 类 规则 将 输入 向 量 分 到 具有 最 大 后 验 概率 值 的 类 
划 中 去 。 

在 进行 故障 诊断 的 过 程 中 , 求 和 层 将 模式 层 中 同一 模式 的 输出 求 和 ,并 乘 以 代价 因子 ; 
决策 层 则 选择 求 和 层 中 和 输出 最 大 者 对 应 的 故障 模式 为 诊断 结果 。 当 上 故障 样本 的 数量 增加 时 ， 
模式 层 的 神经 元 将 随 之 增加 。 而 当 故 障 模式 多 于 两 种 时 ， 则 求 和 层 神 经 元 将 增加 。 所 以 ， 
随 着 故障 经 验 知 识 的 积累 ， 概 率 神 经 网 络 可 以 不 断 横 向 扩展 ， 故 障 诊断 的 能 力也 将 不 断 提 


高 。 
8.4.2 基于 PNN 的 故障 诊断 











1. 问题 描述 

发 动机 运行 过 程 中 ， 油 路 和 气 路 出 现 故 障 是 最 多 的 。 由 于 发 动机 结构 复杂 ， 很 难 分 清 
故障 产生 的 原因 ， 所 以 接 下 来 尝试 利用 PNN 来 实现 发 动机 的 故障 诊断 。 

在 发 动机 运行 中 常 先 用 前 6 种 特征 参数 为 AI、MA、DI、MD、TR 和 ER。 其 中 ，AI 
为 最 大 加 速度 指标 ，MA 为 平均 加 速度 指标 ，DI 为 最 大 减速 度 指 妹 ，MD 为 平均 减速 度 指 
标 ，TR 为 钮 矩 谱 波 分 量 比 ，PR 为 燃 爆 时 上 升 速度 。 
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而 司 杯 名 问 络 还 记 SMATLAB 7zm 
异 二 二 中 唱 画 
进行 该 断 时 ， 首 先 要 提 权 有 关 的 特征 天 数 ， 灼 后 利用 PNN 进行 诊断 ， 读 断 模 型 如 图 
8 所 示 。 


正 重 柄 由 
和 匡 朴 圳 
上 站 天 于 
所 下 租 气 
兴 攻 ,气门 起 卫 
省 大 名 虹 起 子 
忆 门 :可 本 许 主 





8 苦于 PNN 的 鉴 动机 座 断 枫 列 


2 PNN 的 剖 建 和 应 十 

由 图 55 可见， 我 们 设计 了 两 个 PNIN 进行 故障 诊断 ，PNMN-I 的 输入 屋 有 两 个 半点 ， 对 
庶 TR 和 正常 状态 ， 样 本 模式 屋 有 两 个 结 点 ， 分 别 财 应 正常 和 故障 两 种 模式 ;输出 屋 有 两 
站 半点， 车 别 对 应 正常 和 上 故障 两 种 由 壹 。 

PNN_[ 的 输 六 层 有 5 个 结 点 ， 分 别 对 应 5 个 特征 做 数 为 AI MA，DI、MD、PR， 模 
式 屋 有 1 让 结 点 ， 对 应 屋 沾 结 点 的 正常 和 故障 中 的 10 组 模式 ， 输出 层 有 4 个 结 操 ， 对 出 
对 应 油 路 故障 。 气 门 硬 气 、 气 征 漏 气 和 正常 4 入 状态 ， 所 谓 信 息 处 理 就 是 通过 输出 的 4 种 
状态 丘 台 判定 实际 输出 究竟 是 单 故障 还 是 督 合 故障 - 

由 于 信息 处 理 策 略 下 属于 二 书 的 讨论 范围 ,因此 ,这 里 主要 从 绍 如 何 利用 PNN 进行 趣 
障 诊 断 。 限 于 篇 幅 的 原因 ， 这 里 选用 上 发 动机 中 的 1 号 气缸 进行 分 析 。 始 过 分 析 ， 读 气缸 一 
找 出 现 了 3 种 故障 ， 分 别 为 油 量 几 、 气 门 漏 气 和 气短 戎 气 ， 香 加 上 正常 状态 ， 可 以 认为 一 
共有 点 种 故障 模式 。 利 用 二 进 制 格式 托 述 这 4 种 巩 障 模式 ， 如 事 86 所 示 。 这 4 种 故障 横 
起 通过 现场 试 蛤 和 对 历史 质料 的 收 华 和 分 析 ， 可 以 得 副 4 组 故障 样本 数据 ， 如 表 BT7 所 责 。 


村 86 茂 障 横 式 分 归 





的 仙 仙 机 地 [人 N 
由 于 这 些 数据 过 间 相 闫 都 下 天， 因此 ， 簿 需要 进行 时 一 化 钼 理 就 可 以 直接 应 用 了 。， 利 


用 这 些 故 障 信息 作为 网 络 的 训练 样 才 ， 从 而 创建 一 个 概率 神经 网 络 用 陡 故 障 诊断 。PNN 的 
创建 方法 和 RBF 网 络 的 创建 方法 非常 相似 ， 代 码 为 : 









其 中 ，P 和 工分 别 为 输入 向 量 和 目标 向 量 ，SPREAD 为 径 向 基 函 数 的 分 布 密度 ， 默 认 
汶 和 1。 才 了 更 好 地 分 析 SPREAD 对 网 络 性 能 的 影响 ， 这 里 将 SPREAD 设置 为 5 个 值 ， 分 
别 为 和 1， 下 3。 避 3 0 洒 和 和 站。 

函数 newpnn 已 此 创建 了 一 个 稚 确 的 概率 神 竖 网 络 ， 可 以 利用 读 网 络 进行 故障 旗 断 和 
和 分析 了 。 
首先 ， 检 驴 网 阁 对 训练 数据 的 分 类 : 












不同 的 SPREAD 值 对 应 的 概 齐 神经 同 络 的 输出 结果 者 是 一 样 的 ， 即 ; 


由 此 可 更 ， 网 络 成 功 地 和 蔡 故 障 模式 分 为 了 4 类 。 为 了 检验 网 络 的 外 推 性 能 ， 接 下 来 给 
出 一 组 副 试 样本 数据 ， 如 表 8-8 所 示 。 这 组 数据 者 来 源 于 真实 的 故障 信息 ， 可 以 有 效 地 术 
验 网 阁 的 性 能 。 


囊 BE 测试 样本 政大 
| 覆 | im | 本 |m 哎 | | | om 
ay | um | om | omt | oml | om | um | 


spa | ug | nu | an |mm |oas |am | 
| wa | ual | um | ol | um | on |om 


利用 上 表 中 的 测试 样本 对 则 络 进行 铀 试 ， 代 码 为: 































输出 结果 为， 


由 此 可 见 ， 网 络 的 分 类 结果 是 正确 的 。 也 吉 是 说 ， 网 妆 成 功 地 诊断 出 了 这 4 种 故 际 ， 
因此 ， 网 络 用 于 故障 座 断 昨 有 效 的 。 


4. 钳 论 


基于 概率 神经 网 络 的 走 障 诊断 方法 可 以 量 大 程度 地 利用 故障 先 驻 知识 ， 在 贝 叶 斯 最小 
凤 险 准则 下 对 发 动机 的 单 故障 进行 定性 诊断 。 概 率 神 经 网 阁 训 练 速度 裤 ， 在 工程 上 易于 实 
现 ， 而 且 对 样本 上 噪声 具有 较 强 的 碍 标 性 ， 可 以 达到 较 高 的 诊断 难 确 率 。 随 着 故障 知识 的 壹 
其 积累 ， 网 络 可 以 平 断 扩张 从 而 进一步 提高 诊断 准确 率 。 


了 二 


瑟 上 汪 | | 上 
En 全 癌 作 过 ESMATLARBR-7xw : 


本 实例 的 完整 MATLAB 代码 为 ， 
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一 二 十 HPTet 





8.5 基于 BP 网 络 的 设备 状态 分 类 器 设计 


本 实例 的 工程 背景 是 某 设 备 中 的 碱 过 条 ， 其 目的 是 设计 一 个 状态 分 类 器 ， 用 于 检 避 闫 
速 箱 的 当前 状态 。 为 了 简单 起 见 ， 特 减速 御 状 态 分 为 正常 状态 、 轻微 故障 杖 态 和 严重 故障 
状态 等 3 种 类 别 。 


8.5.1 BP 网 络 设计 


首先 ， 需 要 蓝 得 网 路 的 输入 和 目标 样本 。 对 碱 惠 箱 运行 忧 坊 进行 监 副 ， 闭 得 了 12 组 状 
柱 样 教 据 ， 有 正常 状态 数据 、 轻 入 故障 钛 态 数 据 和 挛 重 故 障 状 杭 数据， 分 别 对 应 类 别 1 
和 3， 徊 妻 下 9 丽 未 。 

囊 上 9 其 天 首要 坊 样 本 败 据 
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接 下 康 需 要 确定 网 络 靖 构 ， 根 据 巧 nimaogorow 定理 ， 采 用 一 个 和 XIW4TXM 的 3 展 BP 
网 次 作 为 眉 霉 分 类 器 。 其 中 ， 及 吉 示 旺 六 特征 向 量 的 苍 旺 昭 ， 时 表示 输出 状态 类 别 总 败 。 
于 于 本 袍 例 ，AME8。 为 了 简化 同 些 睛 构 ， 用 【417 表示 正常 状态 ,【1.07 妻 示 轻 微 故 障 状 
碍 11 才 示 严重 克 障 状态 。 这样 一 夷 ， 就 可 以 在 网 阁 中 只 设计 两 个 输 六 神 既 元 哥 示 这 3 
种 故障 状态 类 别 。 由 此 可 得 ， 计 BF 同 络 丫 构 方 ， 输 六 层 有 站 修神 坚 元 ， 中 则 屋 有 17 个 塘 
经 元 ， 输 出 屋 有 了 站 神 妈 元 。 技 照 一 般 的 设计 瓦 案 ， 审 间 屋 神色 元 的 传递 画 燥 为 弛 型 正切 
函数 ， 输 出 层 昼 弃 元 的 传递 函数 为 号 型 对 艇 函数 ， 之 所 以 选择 号 型 对 晶 函 数 ， 是 因为 访 函 
更 为 下 1 函数， 正好 谢 中 设备 姑 态 耸 芝 蜗 的 情 出 要 求 。 
字 下 囊 示 网 络 的 输入 样本 向 量 ， T 表 示 网 络 的 目标 商量 。 由 妻 8.9 可 得 : 







一 二 一 


站 正和 需要 保持 列 灶 相等 ， 香 刚 在 这 千 过 程 中 全 出现 异 误 ， 








利用 如 下 候 码 可 以 创建 一 个 符 台 以 上 要 隶 的 BF 网 络 。 网 络 的 训练 函数 为 ainlm， 读 
函数 的 运行 速度 比较 快 ， 对 于 中 大 型 的 网 络 比较 侣 适 。 学 习 函 数 取 革 认 值 leammgdm， 性 能 
函数 取 默 认 值 mse。 其 中 函数 minmax 设 定 了 输入 向 量 元 素 的 赣 值 范围 。 





8&.5.2 网 络 训练 


网 绪 创 建 后 ， 间 不 能 直接 投入 使 用 ， 必 须 经 过 训练 并 且 达 到 要 求 后 ， 才 可 以 作为 设备 
状态 分 类 器 使 用 ，。 网 妾 的 训练 代码 如 下 : 





划 诬 结果 为 ， 


可 见 ， 经 过 17 次 训练 后 ， 网 阁 误差 达到 设 定 的 最 小 值 ， 蛙 果 如 图 8.6 所 示 。 


P 可 口 DIIDM FE 人 ?村 十 打 汪 | 





图 & 6 网络 训 贬 司 果 
_ 搂 下 来 通过 仿真 素 检验 网 络 的 输出 是 否 清 足 要 求 ， 代 码 如 下 : 
运行 关 果 为 











对 巾 表 89 可知 ， 该 网 络 组 成 的 状态 分 娄 器 可 以 有 效 准 确 地 识别 该 减速 箱 已 经 出 现 的 
运行 状态 ， 为 故障 检测 提供 了 有 效 的 工具 。 


8.5.3 网络 种 试 与 麻 用 


网 络 测 试 的 目的 是 为 了 确 宣 网 络 是 天 请 足 实际 应 用 的 要 求 。 需 要 指出 的 是 ， 钢 诺 遇 据 
应 该 和 训 儿 用 的 样本 数据 和 一致 ， 和 否则， 测试 得 出 的 结果 永远 都 是 油 意 的 。 

现在 车 别 在 设备 正常 状态 。 轻 微 故 隧 状 态 和 严重 故障 状态 下 测 得 了 组 状态 整 据 ， 如 表 
中 -所 未。 


囊 下 10 测试 据 
这 机 林 间 本 
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试 利用 上 面 设 计 的 网 阁 判别 它们 分 别 属于 哪 一 种 状态 ， 代 码 闻 下 


用 局 瑟 






人 十 os 
由 此 可 见 ， 包 13 组 状态 数据 局 于 正常 状态 (0.1)， 第 14 组 状态 数 据 几 于 轻微 故障 状 
二 10) 第 15 组 状态 数据 局 于 严重 故障 状态 《1.1)。 这 与 实际 情况 是 相符 合 的 ， 说 明 所 
设计 的 设备 状态 分 类 器 是 侣 理 的 ， 可 以 投入 实际 应 用 。 
本 实例 的 完整 MATLAB 代码 如 下 ， 










| 本 画面 局 上 
TEN 






8.6 基于 RBF 网 络 的 船用 柴油 机 故障 诊断 


船用 紫 宙 机 是 闲 个 船 知 的 动力 装置 ， 紫 油 机 一 旦 发 生 故 障 就 全 对 向 舱 的 安全 性 造成 扫 
天 的 威胁 。 国 此 ， 如 何 迅 速 判 灯 故 障 发 生 的 原因 ， 进 而 有 效 地 排除 确 障 ， 保 证 杉 租 的 继续 
正常 航行 内 有 特别 重要 的 意义 。 传 统 的 柴油 机 而 障 诊断 方法 包括 很 多 种 ， 好 油 滑 油 法 、 性 
能 参数 法 和 振动 哈 声 法 等 

近年 来 ， 随 着 计算 机 技术 。 信 号 分 析 技术 、 模 贿 和 人 工 智 能 技术 的 冀 展 ， 柴 油 机 故障 
诊断 技术 担 到 了 银 太 程度 上 的 发 展 。 亡 其 是 以 非 线性 并 行 分 布 钼 理 为 主流 的 神 既 网 络 理 诊 
的 发 展 ， 为 紫 油 机 故障 座 断 技术 的 研究 开 尽 了 新 的 途 往 。 通 过 专家 经 验 和 对 柴油 机 过 程 的 
权 拟 去 特 ， 归 蛙 出 具有 典型 特征 的 样本 ， 组 织 构造 相应 的 神经 网 阁 ， 果 用 样本 集 对 网 阁 进 
行 名 红 。 使 得 网 络 通过 学 习 ， 把 样本 中 的 输入 和 目标 向 量 之 间 的 对 应 关系 记忆 在 同 络 结 煌 
上 .通过 神经 网 络 推理 ， 可 以 对 柴油 机 进行 故障 诊断 。 

本 节 主 要 研究 如 何 利用 MATLAB 神经 网络 工具 箱 ， 基 于 RBF 网 络 进行 柴 负 机 的 故障 
诊断 。 首 先 建立 神经 网 络 诊断 机 型 ， 然 后 收集 某 型 号 柴油 机 的 征兆 /样本 集 ， 采 用 一 个 单 陷 
屋 的 RBF 网 络 对 样本 进行 串 练 最 后 ， 通 过 测试 网 络 ， 验 证 读 网 络 对 于 硫 障 模式 的 识别 礁 
确 率 ， 并 对 故障 严重 程度 进行 定量 预测 。 


8.6.1 问题 描述 


船用 占 油 机 是 一 个 非常 复杂 的 机 电 系 统 ， 采 用 整 机 诊断 模型 非常 复杂 ， 如 果 采 用 一 个 
神经 网 络 横 型 将 使 得 网 络 结构 非常 席 大 ,学 习 训练 过 程 比较 繁 珊 。 根据 故障 的 层次 性 特点 ， 
可 将 柴油 机 下 机 分 为 雇 气 词 轮 增 压 系统 .气缸 话 塞 组 件 、 顽 烧 系 统 ， 润 滑 系统 和 燃油 系统 
等 子 系 统 。 任 一 子 系统 的 故障 都 可 能 使 柴油 机 的 性 能 退化 甚至 表 失 。 因 此 ， 些 油 机 的 故障 
话 断 可 以 分 为 两 个 屋 次 进行 ， 首 先 由 整 册 性 能 参数 的 退化 状态 判断 故障 的 可 能 位 置 ， 即 者 
障 可 能 处 于 哪 一 个 子 系统 ， 这 称 为 第 一 层 侈 论断， 然后 对 该 子 系统 进一步 诊断 故障 原因 ， 
位 置 和 严重 种 度 ， 这 称 为 第 二 层次 诊断 。 由 于 第 一 层次 的 途 断 过 程 比较 简单 和 直接 ， 因 此 


2 





不 必 采 用 神经 网 络 模型 ， 只 有 在 进行 第 .层次 诊 电 时 才 采用 RBF F 神经 网 络 ， 
经 过 对 柴油 机 的 大 量 改 障 资 料 进行 分 析 ， 我 们 知道 涡轮 增 压 系统 、 汽 短 活 塞 组 件 与 娩 
烧 系 统 运 行 中 发 生 故 障 的 概率 最 高 ， 本 节 仅 研究 涡轮 增 压 系统 的 故障 诊断 问题 。 


8.6.2 ”涡轮 增 压 系统 的 故障 诊断 


1. 征兆 / 戊 障 样本 集 的 收集 与 设计 

根据 对 船用 低速 增 压 上 荣 油 机 的 工作 过 程 的 理论 分 析 和 实际 运行 经 验 ， 可 以 确定 涡轮 增 
压 系统 各 部 件 可 能 出 现 故障 的 原因 和 部 位 ， 作 为 故障 变量 即 输出 变量 ;同时 确定 用 于 区 别 
各 种 故障 的 征兆 变量 作为 网 络 输入 变量 ， 

(1) 输出 变量 

输出 变量 即 故 障 变量 ， 包 括 正 常 工 况 【无 故障 ) 串 、 增 压 器 效率 下 降 〈 于 气 机 、 透 绊 
二 空冷 器 传 热 恶化 矶 、 透 平 保护 格 概 阻 塞 刺 、 延 平 通 六 部 分 阻塞 

气 泪 清 器 阻塞 瑟 、 空 冷 器 空气 侧 流 阻 增 大 访 和 废 热 锅 炉 流 阻 增 大 丽 。 其 中 ， 环 到 

全 到 什 范围 办 0， 1 0 表 下 无 此 机 大 ，1 表皮 丰 障 严 重 。 其 中 网 络 的 输出 变 基 包括 品 
到 5， 而 霹 、 记 和 本 直接 由 部 件 特性 参数 诊断 输出 。 

《2) 输入 变量 

输入 变量 即 征兆 变量 ， 包 括 排 气 总 管 温度 忆 、 扫 气 箱 压 力 己 、 各 和 全 平均 燃烧 最 大 爆发 
压 力 P。、 增 压 器 转速 凡 、 扫 排 气 道 压 损 系 数 、 压 气 机 出 口 温度 忆 、 扫 气 箱 温 度 五 、 滤 网 
压 损 系 数 、 空 淮 器 正 损 系数 和 废气 锅炉 压 损 系数 ， 再 加 上 柴油 机 负荷 的 一 个 参数 ， 一 共 1 
个 输入 变量 ， 它 们 有 的 是 直接 测量 得 到 的 参数 ， 有 的 是 由 测 基 参数 导出 的 参数 ， 例 如 某 个 
部 件 前 后 的 压 降 是 直接 测 基 的 ， 但 采用 其 导出 的 压 损 系数 ， 能 更 好 地 反应 出 墙 塞 故 障 的 特 
性 。 

根据 内 燃 机 原理 和 船用 柴油 机 技术 规范 的 要 求 ， 可 以 得 到 柴油 机 的 工作 参数 标 称 值 ， 
即 无 故障 时 的 数据 

归 ” 气 全 排 气温 度 ，30K (绝对 温度); 
扫 气 箱 压力 ，0.06MPa; 
最 大 爆发 压力 ，1MPa: 
增 压 器 转速 :25s1 (15S00 wmin ); 
总 网 压 损 系数 : 0.1; 
空冷 器 压 损 系数 ，0.1 
废 热 锦 炉 讨 损 系数 : 0.1; 
同 呈 道 压 损 系数 : 0.06; 
压气 机 出 口 将 订 ，30K; 
扫 气 箱 温度 40K . 

如 果 上 述 工作 参数 上 下 偏差 超过 以 上 数据 ， 则 认为 柴油 机 有 故障 ， 其 中 ， 排 气 总 管 温 
度 万、 扫 气 箱 压力 妒 、 各 生平 均 人 燃烧 最 大 爆发 压力 Pas、 增 压 器 转速 we、 扫 排 气 道 压 损 系 
数 、 压 气 机 出 口 温 度 亿 和 扫 气 箱 温度 了 作为 网 络 输入 变量 ;而 泪 网 压 损 系数 、 空 淮 器 压 损 
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1 aa 
而 后 多 本 ESMATLAB si 
系数 和 废气 帆 护 压 损 系 攻 则 作为 部 件 特性 参数 ， 直 斤 进 行 褒 断 。 
[3 征 碍 | 破 障 样本 入 的 设计 
征 斐 /大 障 样 奈 集 的 正确 确定 是 神经 同 些 蕉 确 进 行 故障 座 断 的 甘 键 环节 .油轮 增 压 系 蝶 
的 一 入 硕 障 对 应 一 个 样本 。 为 了 进一步 读 断 故障 的 严重 程度 ， 这 里 对 紫 企 赦 障 取 两 小 样本 ， 
目标 值 分 别 为 5 和 1。 为 了 反 轴 机 组 运行 负荷 范围 的 征兆 和 故障 的 对 应 甘 系 ， 对 额定 俩 荷 
On AMCRI。 部 分 页 戎 【果品 MCR，75 有 MICR) 和 半角 荷 【 和 有 MICR1 等 和 种 情况 给 
出 料 来 。 经 过 是 计 ， 这 部分 的 样本 汕 了 个 。 
击 卑 齿 舱 可 能 会 远洋 航行 ， 因 此 把 支 气 环 境 误 麻 分 为 3 部 分 ， 即 283 民 一 294 民 、 
0 有 30 区 利 | 307 区 -318K， 间 分 别 以 288K。300K 和 312K 为 样本 中 心得 到 相应 的 样本 
杠 『【 翌 本 总 数 为 108 个 六 用 于 训 蝶 RBFE 村 冯 网 络 ， 从 面 实 现 旨 油 机 运行 克 障 的 诊断 。 
基于 100 呈 EMCR，90 和 MICR、，T55MCR 和 50MCR 的 类 动机 机 项 ， 我 们 给 由 了 枯 气 
温 诬 为 300 区 、312K 和 288K 的 输 关 样 标 向量 和 相应 的 输出 目标 癌 量 的 征 浊 / 丰 障 样本 偶 。 
限于 籍 晤 ， 这 里 内 列 出 了 齐 度 沽 28K 时 的 站 组 征 渴 / 极 障 样本 琢 据 中 的 引 组 册 据 ， 大 利用 
这 部 分 至 据 进行 网 终 训 练 ， 奶 表 生 1 所 责 。 


必 - 
站 于 -和 .了 一 下 有 9 了 一 有 ,其 看 让 有 下 -IN 放 499 


DT ODN685DGS 49 


本 1 本 355 本 且 中 2 二 和 生 本 让 下 9 本 是 必 上 全 用 李 





2 网 络 输出 向 量 设 计 


从 便于 座 断 的 角 认 出 发 ， 特 故障 的 严重 程度 分 为 3 组 ， 即 1 缓 克 障 2 级 故障 和 无 芍 
障 【 正 常 工 况 )。 根 据 网 络 的 输出 向 量 ， 娃 果 处 理 加 下 : 


著 05<5E<10， 则 户 =l 妈 【 严 重 故 障 小 
荐 05<Fe05， 则 F=z 级 【中 等 列 障 ) 


若 万 <025 或 者 >1.50， 则 万 天 正常 【无 故障 ) 
由 此 可 判定 夏 障 的 严重 程度 。 


] 


1 
8.6.3 网络 设 计 


径 向 基 【RBE) 网 络 主要 包括 陷 售 屋 和 输出 层 ， 其 中 隐 售 层 的 传递 函数 为 radbas， 输 
出 明 的 传递 函数 元 纯 钱 性 函 敖 purelio。 如 图 8-7 所 示 ， 类 向 基 网络 的 孜 言 层 有 8 个 神经 元 ， 
输出 屋 有 悍 个 圳 既 元 。 





图 8.7 径 向 基 网 路 时 构 


神 竖 网 络 工具 箱 中 用 于 创建 RBF 网 络 的 函数 为 newrbe, 在 设计 过 程 中 , 量 重 要 的 套数 
是 色 向 挎 函数 的 分 布 常数 。 由 于 二 例 中 的 样本 数目 不 是 要 大， 我 们 将 分 布 常数 设 定 为 1.2。 
由 此 ， 可 利用 如 下 MATLABE 代码 创建 一 个 RBF 网 络 ; 







其 中 旦 和 工分 别 对 应 输入 向 量 和 目标 向 量 ， 它 们 可 从 表 Bii 中 得 到 。 
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ES 亲人 RESMATLAB :7 
当 网 结 的 恰 六 变量 确定 后 ， 需要 进行 归 一 化 钼 理 ， 这 里 桂 其 谈 换 在 [- 1,1] 
的 范围 内 ， 弃 过 归 一 化 星 理 的 擂 据 对 于 神经 回 早 更 窗 盟 训练 和 学 习 。 固 鸭 原 始 
喜 握 往 慎 夫 小 和 一 ， 有 时 候 相 差 还 比较 县 压 ， 如 林 直 接 援 六 使 用 ， 测量 慎 友 的 
波动 就 垄断 了 和 神经 网 络 的 学 习 过 程 ， 使 其 不 能 反映 小 的 测量 值 的 变化 。 归 一 化 
后 的 喜 据 是 通过 计算 员 量 慎 与 相应 的 更 此 障 情 况 下 基准 值 的 恼 关 值 , 再 除 忆 本 

太 偏 莽 值 的 纯 对 值 来 获得 由 入 变量 的 ， 


在 利用 函 虹 newnrbe 创 达 RBF 网络 过 程 中 , 可 以 自动 增加 隐 舍 层 的 神经 元 
小戏 。 直 到 雹 坟 谍 差 满 足 委 求 为 止 。 所 以 ， 岗 结 的 蔬 建 过 程 就 是 训 蛛 过 程 了 . 


接 下 来 通过 一 组 实际 数据 对 网 络 进行 测试 ， 看 网 络 是 否 可 以 正确 诊断 出 油轮 增 压 系统 
中 的 故障 。 好 果 可 以 正确 旗 断 出 故障 ， 则 网 络 可 以 投 六 使用。 分 别 在 丙 ， 态 和 癌 有 胡 障 
时 进行 副 量 ， 得 到 各 参数 的 值 ， 特 这 些 蚊 据 作为 输入 向 量 ， 利 用 仿真 函数 计算 网 络 物 出 ， 
通过 故障 判别 准 期 看 是 否 出 了 故障 。 调 试 数 据 如 表 812 所 示 。 


要 尼 们 ”和 测 斌 数据 
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5 瑟 有 严重 才 际 


而 本 上 本 01 机 3 各 训 [ 捕 居 = 贡 1 本 本 和 看. 于 让 汪汪 F 布 趾 鲁 站 随 


| 扎 有 严重 苍 障 | 






测试 寻 果 妇 表 8-13 所 示 。 





分 析 结 果 后 用 现 ， 网 络 成 功 地 诊断 出 了 所 有 故障 。 因 此 ， 可 以 将 该 网 络 投入 实际 工程 
应 用 了 ， 


未 此 限于 篇 幅 ， 采 用 的 样本 量 比较 由 这样 一 来 故障 诊断 的 数据 范围 吉 
不 合 很 大 ， 对 于 那些 和 训 疆 喜 所 相差 根 大 的 吉 据 ,网 络 可 能 元 法 做 出 正确 的 论 


了 34 
ET 


| 上 一 

= 用 丰 寺 和 介 王 一 一 全 本 < 上 
断 ; 在 这 镍 情 讯 下 ， 如 果 想 提高 网 络 的 故障 识 列 准确 率 ， 建 议 匀 用 大 窜 重 的 训 
昧 样本 ， 


本 实例 完整 的 代码 如 下 : 





下 


87 小 结 


本 章 研 究 了 利用 神 既 网 络 工具 箱 来 实现 基于 神经 网 络 故障 旗 断 的 5$ 个 实例 ， 通 过 这 些 
研究 ， 使 得 挤 既 网 络 工 具 稍 从 翌 论 上 升 到 了 生 际 应 用 ， 六 和音 分 析 以 上 话 断 实例 ， 我 们 可 以 
澳 现 : 

[17 基于 神 妈 两 络 的 故障 旗 断 方法 在 系统 参数 未 知 的 情况 下 能 鲍 自 动人 建立 动 态 模 型， 
对 于 钱 性 系 线 和 非 归 性 系统 都 有 起 好 的 跟风 人 能 考 , 因此 可 以 准确 地 识别 出 票 统 存 在 的 故障 。 

【2 通过 改进 或 者 选用 商 效 的 训练 学 习 算 杀 ,可 以 在 同等 的 收 敏 要 求 下 ， 款 得 较 高 的 

认 断 精 座 ， 








《3) ) 特征 提取 是 基于 神经 网 络 进行 故 入 诊断 的 关键 问题， 所 提取 的 特征 需要 具有 代表 
性 和 典型 性 ， 能 够 表征 系统 的 故障 状态 。 另 外 ， 特 征 的 形式 要 便于 进行 数学 处 理 ， 以 作为 
网 络 的 训练 样本 和 测试 样本 。 

(4) 样本 的 数量 和 质量 能 够 在 很 大 程度 上 影响 神经 网 络 的 诊断 精度 。 所 谓 数 量 ， 指 的 
是 训练 样本 的 数目 要 充足 ， 对 于 同一 种 故障 状态 ， 要 尽量 多 地 提取 相应 的 特征 数据 ;所 良 
质量 ， 指 的 是 样本 数据 中 需要 昔 含 所 有 可 能 的 故障 状态 特征 数据 。 这 样 既 可 以 提高 网 络 的 
推理 能 力 ， 又 可 提高 活化 能 力 ， 

基于 神经 网 络 的 故障 诊断 已 经 迹 渐 走向 成 熟 ， 神 经 网 络 工具 箱 的 应 用 可 以 在 很 大 程度 
上 解决 神经 网 络 训练 和 仿 店 过 程 中 繁琐 的 数学 计算 问题 ， 从 而 提高 诊断 的 效率 和 水 平 ， 提 
高 故障 诊断 的 信息 化 程度 。 
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第 9 章 基于 神经 网 络 的 预测 


在 系统 建 模 、 辨 识 和 预报 中 ， 对 于 线性 系统 ， 在 频 域 ， 传 道 函 数 和 矩阵 可 以 很 好 地 表达 
系统 的 黑箱 式 输入 /和 输出 模型 ;在 时 域 ， 利 用 自 回归 滑动 平均 (ARMA) 模型 通过 各 种 参数 
估计 方法 ， 也 可 以 给 出 系统 输入 /输出 的 描述 。 这样 一 来 ， 线 性 系统 预测 问题 就 已 经 比较 完 
美的 解 侯 了。 但 对 于 非 线性 系统 ， 一 般 采 用 基于 非 线性 自 回 归 滑 动 平 均 (NARMA ) 模型 
进行 预测 ， 但 是 ， 很 难为 这 种 模型 找到 一 个 怡 当 的 参数 估计 方法 。 因 此 ， 可 以 说 传统 的 非 
线性 系统 辨识 ， 在 理论 研究 和 实际 应 用 方面 ， 都 存在 极 大 的 困难 。 

相 比 之 下 ， 神 经 网 络 在 这 方面 显示 出 了 明显 的 优越 性 。 由 于 神经 网 络 具 有 通过 学 习 遏 
近 人 和 企 意 非 线性 映射 的 能 方 ， 将 神经 网 络 应 用 于 非 线 性 系统 的 建 模 与 辨识 ， 可 以 不 受 非 线性 
模型 的 限制 ， 便 于 给 出 工程 上 易于 实现 的 学 习 算 法 。 

本 章 以 几 个 实例 为 背景 ， 介绍 了 如 傈 利用 神经 网 络 工 具 箱 ,实现 基于 神经 网 络 的 预测 。 
主要 内 容 为 : 

昌 ”基于 神经 网 络 的 预测 原理 
电力 系统 负 关 预报 的 MATLAB 实现 
河道 浅滩 演变 预测 的 MAILAB 实现 
地 震 预 报 的 MATLAB 实现 
交通 运输 能 力 预测 的 MATLAB 实现 
胶 市 预测 的 MATLAB 实现 
财务 失败 预测 的 MATITLAB 实现 
农作物 员 情 预测 的 MATLAB 实现 





9.1 引 言 


目前 在 系统 建 模 与 预报 中 ， 应 用 最 多 的 是 静态 的 多 层 前 向 神经 网 络 ， 这 主要 是 因为 这 
种 阅 络 具有 逼近 任意 非 线 性 映射 的 能 力 。 利 用 静态 的 多 层 前 向 神经 网 络 建立 系统 的 输入 /和 输 
出 模型 ， 本 质 上 就 是 基于 网 络 通 近 能 力 ， 通 过 学 习 获 知 系统 差分 方程 中 的 位 置 非 线性 末 数 。 
对 于 蔚 态 系统 的 建 模 预报 ， 多 层 前 向 网 络 能 够 取得 良好 的 效果 。 但 在 实际 应 用 中 ， 需 要 建 
模 和 预报 的 多 为 非 线 性 动态 系统 ， 利 用 多 层 前 向 神经 网 络 必 须 事先 给 定 模型 的 阶 次 ， 即 预 
先 确 定 系统 的 模型 类 ， 这 一 点 非常 难 做 到 。 

近来 ， 具 有 内 部 反馈 的 动态 网 络 在 系统 建 模 与 预报 中 的 应 用 已 经 得 到 重视 ， 代 表 了 神 
经 网 络 建 模 与 预报 的 发 展 方向 。 主 要 是 因为 动态 网 络 本 身 就 是 动态 时 变 系 统 ， 对 于 动力 学 
系统 建 模 有 着 自然 的 反映 系统 动态 变化 的 能 力 ， 不 需 预 先 确定 系统 的 模型 类 和 阶 次 。 但 是 ， 
目前 有 关 基 于 动态 网 络 的 建 模 和 预报 的 研究 ,“ 还 不 如 静态 多 层 前 向 网 络 研究 得 那么 深入 ， 
还 缺乏 特别 令 人 信服 的 动态 网 络 模型 ， 动 态 网 络 的 逼近 能 力 还 设 有 严谨 的 理论 成 果 ， 学 习 
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算法 还 需要 进一步 的 完善 。 
尽管 仍然 存在 一 些 关 键 性 的 理论 癌 题 尚未 解决 ， 但 许多 研究 成 果 表 明 ， 神 经 网 络 在 非 
线性 系统 的 预报 方面 有 着 广泛 的 应 用 前 最 。 下 一 节 将 介绍 如 何 利用 神经 网 络 进行 预测 


9.2 ”基于 神经 网 络 的 预测 原理 


9.2.1 正 向 建 模 


正 向 建 模 是 指 训练 一 个 神经 网 络 表 达 系 统 正 向 动态 的 过 程 ， 这 一 过 程 建立 的 神经 网 络 
模型 称 为 正 向 模型 。 正 向 模型 的 结构 如 图 9-1 所 示 ， 其 中 神经 网 络 与 待 辨识 的 系统 并 联 ， 
两 者 的 输出 误差 用 做 网 络 的 训练 信号 。 显 然 ， 这 是 一 个 典型 的 有 教师 学 习 问 题 ， 实 际 系统 
作为 教师 ， 向 神经 网 络 提供 算法 所 需 的 期 望 输出 。 当 系统 是 被 控 对 象 或 传统 控制 器 时 ， 神 
经 网 络 多 采用 多 层 前 向 网 络 的 形式 ， 可 直接 选用 BP 网 络 或 它 的 各 种 变形 。 而 当 系 统 为 性 
能 评价 器 时 ， 则 可 选择 再 励 学 习 算 法 ， 这 时 网 络 既 可 以 采用 具有 全 局 各 近 能 力 的 网 络 ， 如 
多 层 同 知 器 ， 也 可 选用 具有 局 部 逼近 能 力 的 网 络 ， 如 小 脑 模 型 关 贡 控制 器 〈CMAC ) 等 。 





图 9-1 正 向 建 模 结 构 


9.2.2 逆向 建 模 


建立 动态 系统 的 道 模型 ， 在 神经 网 络 控制 中 起 着 关键 作用 ， 并 且 得 到 了 特别 广泛 的 应 
用 。 下 面 介绍 其 中 比较 简单 的 直接 逆 建 模 法 ， 

直接 北 建 模 也 称 为 广义 道学 习 ， 如 图 9-2 所 示 。 从 原理 上 说 ， 这 是 一 种 最 简单 的 方法 。 
由 图 可 见 ， 拟 预报 的 系统 输出 作为 网 络 的 输入 ， 网 络 输出 与 系统 输入 比较 ， 相 应 的 输入 误 
差 用 于 训练 ， 因 此 网 络 将 通过 学 习 建立 系统 的 逆 横 型。 但 是 如 果 记 辨识 的 非 线性 系统 是 不 
可 道 的 ， 利 用 上 述 方法 ， 将 得 到 一 个 不 正确 的 逆 模型 。 因 此 ， 在 建立 系统 首 模 型 时 ， 可 道 
性 应 该 事先 有 所 保证 。 
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9-2 直接 道 建 模 


为 了 获得 良好 的 着 动力 学 特性 ， 应 妥善 选择 网 络 训练 所 需 的 样本 集 ， 使 其 比 未 知 系 统 
的 实际 运行 范围 更 大 。 但 实际 工作 时 的 输入 信号 很 难事 先 给 定 ， 因 为 控制 目标 是 使 系统 输 
出 具有 期 望 的 运动 ， 对 于 未 知 被 控 系 统 期 望 输入 不 可 能 给 出 。 另 一 方面 ， 在 系统 预报 中 ， 
为 保证 参数 估计 算法 的 一 致 收 伍 ， 必 须 使 用 一 定 的 持续 激励 的 输入 信和 号。 对 于 神经 网 络 ， 
这 是 一 个 仍 有 待 于 进一步 研究 的 问题 。 

下 一 节 将 研究 如 何 利 用 神经 网 络 来 实现 电力 系统 的 负荷 预测 。 


9.3 ”电力 系统 负 和 具 预 报 的 MAITLAB 实现 


电力 负荷 预报 在 实时 控制 和 保证 电力 系统 经 济 、 安 全 和 可 靠 运行 方面 起 着 重要 作用 ， 
它 已 经 成 为 电力 系统 中 现代 能 量 管理 系统 的 一 个 主要 组 成 部 分 ， 尤 其 是 短期 负荷 预报 对 于 
系统 运行 和 生产 费用 具有 非常 重大 的 影响 。 负荷 预报 的 误差 将 导致 运行 和 生产 费用 的 剧 增 ， 
因此 ， 精 确 的 预报 对 于 电力 部 门 和 供电 系统 都 有 着 重要 的 经 济 意义 。 因 此 ， 如 何 提高 短期 
预报 的 精度 就 成 了 电力 工作 者 和 其 他 科技 人 员 致 力 解决 的 问题 。 

负荷 预测 对 电力 系统 控制 、 运 行 和 计划 都 有 着 重要 意义 。 电 力 系 统 负荷 变化 受 多 方面 
影响 ， 一 方面 ， 负 荷 变化 存在 着 由 未 知 不 确定 因素 引起 的 随机 波动 ， 另 一 方面 ， 又 具有 周 
期 变化 的 规律 性 ， 这 也 使 得 负荷 曲线 具有 相 亿 性 。 同 时， 由 于 受 天 气 、 节 假日 等 特殊 情况 
影响 ， 又 使 负荷 变化 出 现 差异 ， 由 于 神经 网 络 所 具有 的 较 强 的 非 线性 映射 等 特性 ， 它 常 被 
用 于 负荷 预测 。 


9.3.1 问题 描述 


电力 系统 负荷 短期 预报 问题 的 解决 办 法 和 方式 可 以 分 为 统计 技术 、 专 家 系统 法 和 神经 
网 络 法 等 3 种 ， 统 计 技 术 中 所 用 的 短期 负荷 模型 一 般 可 归 为 时 间 系 列 模 型 和 回归 模型 。 时 
间 系 列 模型 的 缺点 在 于 不 能 充分 利用 对 负荷 性 能 有 很 大 影响 的 气候 信息 和 其 他 因素 ， 导 致 
了 预报 的 不 准确 和 数据 的 不 稳定 。 回 归 模 型 虽然 考虑 了 气象 信息 等 因素 ， 但 需要 事先 知道 
负荷 与 气象 变量 之 间 的 函数 关系 ， 这 是 比较 困难 的 。 而 且 为 了 获得 比较 精确 的 预报 结果 ， 
需要 大 量 的 计算 ， 这 一 方法 不 能 处 理气 候 变量 和 与 负荷 之 间 的 非 平衡 暂 态 关系 。 专 家 系统 
法 利用 了 专家 的 经 验 知识 和 推理 规则 ， 使 节 恨 日 或 有 重大 活动 日 子 的 负荷 预报 精度 得 到 了 
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所 高 但 是 ， 把 专家 知识 和 经 验 等 准确 地 转化 为 系列 规则 是 非常 不 容易 的 。 

的 所 周知 ， 负 荷 曲线 是 与 很 多 因素 相关 的 一 个 非 线 忻 函 数 。 对 于 柏 取 和 逼近 这 种 非 线 
性 函数 ， 神 经 网 络 是 一 种 合适 的 方法 。 神 经 网 络 的 优点 在 于 它 具 有 模拟 多 变量 而 不 需要 对 
输入 变量 做 复杂 的 相关 假定 的 能 力 。 它 不 依靠 专 家 经 验 ， 只 利用 观察 到 的 数据 ， 可 以 从 训 
练 过 程 中 通过 学 习 来 抽取 和 逼近 隐 含 的 输入 /输出 非 线 性 关系 。 近年 来 的 研究 表明 ， 相 对 于 
前 两 种 方法 ， 利 用 神经 网 络 技术 进行 电力 系统 短 斯 负 疝 预报 可 获得 更 高 的 精度 。 

在 对 短期 负荷 进行 预报 前 ， 一 个 特别 重要 的 问题 是 如 何 划 分 负荷 类 型 或 日 期 类 型 。 纵 
观 已 经 发 表 的 文献 资料 ， 大 体 有 以 下 几 种 划分 模式 : 

(1) 将 一 局 的 7 天 分 为 工作 日 《星期 一 到 星期 五 ) 和 休息 日 《星期 六 和 星期 天 ) 等 两 
种 类 型 

《2》 将 一 周 分 为 星期 一 、 星 期 二 到 星期 四 、 星 期 五 、 星 期 六 和 星期 日 等 5 种 类 型 。 

(3) 将 一 周 的 了 天 每 天 都 看 做 一 种 类 型 ， 共 有 ?了 种 类 型 。 

本 例 采 用 第 3 种 负荷 划分 模式 ， 把 每 一 天 不 加 区 分 地 看 做 不 同 的 类 型 。 


9.3.2 ”输入 /输出 向 量 设计 


在 预测 日 的 前 一 天 中 ， 每 隔 2 个 小 时 对 电力 负 菏 进 行 1 次 测量 ， 这 样 一 来 ， 一 天 共 测 
得 12 组 负荷 数据 。 由 于 负荷 值 曲线 相 邻 的 点 之 间 不 会 发 生 窒 变 ,因此 后 一 时 刻 的 值 必 然 和 
前 一 时 刻 的 值 有 关 ， 除 非 出 现 重 大 事故 等 特殊 情况 。 所 以 这 里 将 前 一 天 的 实时 负荷 数据 作 
为 网 络 的 样本 数据 。 

此 外 ， 由 于 电力 负荷 还 与 环境 因素 有 关 ， 比 如 最 高 和 最 低 气 温 等 。 因 此 ， 还 需要 通过 

气 预报 等 手段 获得 预测 日 的 最 高 气温 、 最 低 气 温和 天 气 特征 值 《 畏 天 、 阴 天 还 是 雨天 )。 
因此 形式 表示 天 气 竺 征 值 ，0 表示 晴天 ”0 表示 胃 天 和 表示 商 天 ， 这 里 将 电力 负荷 预测 
日 当天 的 气象 特征 数据 作为 网 络 的 输入 变量 . 因此 ， 输 入 变量 就 是 一 个 15 维 的 向 量 。 

显而易见 ， 目 标 向 量 就 是 预测 日 当天 的 12 个 负 苟 值 ， 即 一 天 中 每 个 整 点 的 电力 铅 。 
这 样 一 来 ， 输 出 变量 就 成 为 一 个 12 维 的 向 量 。 

获得 输入 和 输出 变量 后 ， 要 对 其 进行 归 一 化 处 理 ， 将 数据 处 理 为 区 间 [0,1] 之 癌 的 数据 。 


加》 


近 几 年 ， 我 国 南方 一 直 处 于 “ 电 荒 ”的 被 动 撞 况 ， 为 了 更 好 地 利用 电能 ， 必 须 做 好 电 
力 负 荷 的 短期 预报 工作 。 这 里 以 南方 某 缺 电 城市 的 2004 年 7 月 10 日 到 7 月 20 日 的 整 点 有 
功 负荷 值 ， 以 及 2004 年 了 月 11 日 到 ?7 月 21 日 的 气象 特征 状态 量 作为 网 络 的 训练 样本 ， 预 
测 7 月 21 日 的 电力 负荷 ， 如 表 9-1 所 示 ， 其 中 所 有 的 数据 都 已 经 好 一 化 了 。 

在 样本 中 ， 输 入 向 量 为 预测 日 前 天 的 电力 实际 负荷 数据 ， 目 标 向 量 是 预测 日 当天 的 电 
力 负荷 。 由 于 这 都 是 实际 的 测量 值 ， 因 此 ， 这 些 数 据 可 以 对 网 络 进行 有 效 的 训练 。 如 果 从 
提高 网 络 精度 的 季度 出 发 ， 一 方面 可 以 增加 网 络 训练 样本 的 数目 ， 另 一 方面 还 可 以 增加 输 
入 向 量 的 维 数 。 即 ， 或 者 增加 每 天 的 测量 点 ， 或 者 把 预测 日 前 几 中 的 负荷 数据 作为 输入 向 
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量 。 目 前 ， 训 练 样本 数目 的 确定 设 有 通用 的 方法 ， 一 般 认 为 ， 样 本 过 少 可 能 使 得 网 络 的 表 
法 币 够 充分 ， 从 而 导致 网 络 外 推 的 能 力 不 够 ， 而 样本 过 多 可 能 使 出 现 样 本 元 余 现 银 ， 既 增 
加 了 网络 的 训练 俩 担 ， 也 有 可 能 出 现 信息 量 过 剩 使 得 网 络 出 现 过 扳 介 现 急 。 总 之 ， 样 本 的 
造 取 过 程 需要 注意 代表 性 。 均衡 性 和 用 电 负 荷 的 自身 特点 ， 从 而 挝 择 合 吾 的 训练 样本 。 


霜 所 1 用 记 负 荷 及 气象 特征 









也 直 78 一 
| 衣 王 下 1 二 他 和 让 3 生硬 3 6 TS 家 训 生 







到 让 了 79 呈 1 | 
在 瑟 村 相 汪 7 放 
可 1 了 而 -3 和 相 | 


BpP 网 站 是 系统 预 各 中 应 用 特别 广 证 的 一 种 网 阁 形 式 ， 因 此 ， 这 里 采用 BF 间 阁 对 负荷 
值 进行 预报 。 根据 BP 网 络 的 设计 网 络 , 一 般 的 预测 问题 都 可 以 通过 单 陷 层 的 BE 阿 冶 实 现 。 
由 于 输 久 向 量 有 15 小 元 素 ， 所 以 网 络 输入 层 的 神 既 元 有 15 个 ， 根据 Kolmogorov 定理 可 
知 网 络 中 间 屋 的 神经 元 可 以 取 31 个 。 而 输出 向 量 有 12 个 ， 所 以 畏 出 层 中 的 神经 元 府 该 有 
12 个 。 同 里 中 间 层 的 杆 此 元 传 遂 函 数 采 用 8 型 正切 函数 fansi 公 输出 层 神经 元 传递 函数 采 
用 中 型 对 数 函 数 logsig， 这 是 因为 函数 的 输出 位 于 区 间 吕 ,上 中 ， 正好 畏 足 网 妾 和 愉 山 的 要 求 。 
利用 以 下 代码 创建 一 个 并 足 上 述 要 求 的 BP 网 络 : 






TS 
而 于 [本 不计 袜 和 交 必 遇 有 和 本 站 


9.3.3 BP 网 络 设计 
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站 全 问 骆 本 这 SNMATLAB Am 让 -- 
玫 人 国画 = 
hreshnltl 叶 人 全 | 1 而 二 : 下 1 并 = | 
-3 4 全 全 | 有 3 





ersmireee 规定 了 网 络 输入 向 量 的 最 
友 值 为 1， 最 小 值 为 0。'ainim'/ 表示 设 定 网 络 的 训练 函数 为 tmainlim， 它 采用 
Levenberg-amudl 等 法 进行 网 络 学 习 。 


9.3.4 网 络 训练 


网 络 经 过 调 练 后 才 可 以 用 于 电力 负荷 预 和 天 的 实际 应 用 。 考 虑 到 网 络 的 靖 构 比较 复杂 ， 
神经 元 个 数 比 较 才 ， 和 需要 适当 增 大 训练 次 数 和 学 习 速 昌 。 训 昧 参数 的 设 定 如 表 9 2 所 示 。 


圳 3 训 晾 扼 贺 





训练 代码 如 下 ，_、 





训练 结果 为 : 





可 见 ， 经 过 5 这 训练 后 ， 网 络 误差 达到 要 求 ， 早 果 如 图 9.3 所 示 。 


和 村 重症 可 1 和 TTT 辣 二 而 恒 下 可 1 
本 人 B 本 用 下 重 
Ce rr- 
图 3 拥 几 结 果 


训练 好 的 网 络 还 需要 进行 抽 试 才 可 以 判定 是 否 可 以 投 上 实际 应 用 。 这 里 的 秋 试 数据 就 
是 利用 表 1 中 的 2004 年 7 月 2 日 的 电力 负 某 和 2 日 的 气象 特征 数据 来 两 铀 21 日 的 用 


了 了 


:33 1 汕 肝 你 生机 和 的 币 0 
二 一 画面 唱 


电 人 负荷 来 检验 预测 误 莽 能 和 理 广 足 要 求 的 ， 代 码 如 下 ， 





这 里 利用 仿真 函数 sim 案 计 算 网 络 的 输出 ， 运 行 结果 为 ， 






“机 报 误差 曲线 如 图 94 所 示 ， 由 图 可 见 ， 网 络 预 测 值 和 真实 值 之 间 的 误 短 是 非常 小 的 ， 
除了 第 遇 次 出 现 了 一 个 相对 比较 大 的 误差 之 外 ， 其 余 的 误差 都 在 0 左右。 即使 是 第 8 次 的 
误 浆 也 只 有 028， 这 党 全 满足 应 用 要 求 。 

硬 开 产 





图 外 4 预报 误 莽 
本 例 的 完整 MATLAB 代码 如 FF， 









| 上 本 侧面 自 
JE 生 名 辣 纤 得 记 SMATLAB :7 ii 
s 订 二 而 | 下 全 4 | 站 二 人 se ， 站 | 和 证 到 F 一 本 站 本 训 。 
= 赴 站 EE 本 和 宪 人 。 二 


9.4 河道 浅滩 演变 预测 的 MATLAB 实现 


河道 中 的 浅 津 碍 航 ， 表 洪 ， 固 此， 无 论 水 利 让 是 水 运 部 门 都 对 斌 淹 的 演变 规律 和 让 津 
的 藻 理 非常 重视 。 滥 梁 镇 变 是 河床 滴 变 的 一 痢 分 ， 仙 重 枯 水 癌 床 变化 分 析 研 究 。 浅 津 锭 变 
预测 的 任务 是 根据 过 去 和 现在 绑 滩 滴 变 的 情况 ， 巴 铀 研究 河 段 贱 梁 断面 年 内 最 小 水 深 和 搁 
津 年 平均 洲 积 厚度 。 目 前 对 让 津 秆 变 预测 的 记 阔 数学 模型 的 研究 尽管 取得 了 很 大 发 展 ， 但 
下 于 水 。 冲 和 边界 的 复杂 性 ， 很 难 考虑 预测 中 的 各 种 随机 因素 ， 物 理 模型 在 试验 时 对 水 、 
沙 模拟 也 存在 一 定 的 困难 ， 且 研究 费用 高 ;实测 资料 分 析 法 ， 以 定性 分 析 和 推理 为 主 ， 所 
得 结论 受 研究 者 的 经 验 影响 ， 因 此 ， 有 必要 根据 宰 滩 演变 的 特点 探索 视 滩 演变 预 届 的 新 方 
法 。 访 滩 河 有 段 可 入 为 一 个 非 线 性 动态 系统 ， 乒 字 的 稼 变 实质 是 系统 对 输入 的 水 流 ， 汽 阔 进 
行 调 整 的 结果 。 机 缀 网 络 模型 具有 根 强 的 非 线 性 映射 能 力 和 季 性 网 络 结构 ， 以 及 高 度 的 容 
异性 和 着 蛋 性 ， 适 于 非 线 性 问题 的 研究 ， 因 此 ， 神 皮 网 络 模型 的 特点 正好 适合 于 说 把 帝 变 
的 预 副 。 


9.4.1 基于 BP 网 络 的 读 变 预 而 


BP 网 络 由 于 结构 简单 ， 具 有 较 强 非 战 性 肌 射 能 力 ， 是 应 用 最 为 广泛 的 一 类 神经 网 络 。 
国 此 ， 这 里 首先 采用 BE 网络 建立 预 届 模 型 。 

1. 影响 因 椰 分 析 

从 通航 目的 出 发， 河道 浅 律 省 变 预 测 关 注 的 是 线 诽 处 年 平均 汕 积 厚度 和 线 浴 断面 年 内 
最 小 水 深 ， 因 此 ， 预 测 模 型 的 输出 因子 是 钱 梁 断面 年 内 最 小 水 深 总和 和 年 平均 党 积 厚度 拉 
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。 
输入 因子 的 选取 与 浅滩 的 形成 和 影响 浅滩 形成 变化 的 诸 因素 有 关 。 从 河 记 演 变 理 论 及 
河流 地 艇 动力 学 角度 出 发 ， 可 以 判断 ， 影 响 浅滩 断面 年 内 最 小 水 深 和 浅滩 年 平均 淤积 厚度 
的 主要 因素 有 : 
章 。” 上 游 来 流量 & 和 来 流 过 程 &~ 





昌 上 游 箱 沙 量 和 输 沙 过 程 召 ~ 泥 钞 组 成 丰 一 疡 : 
昌河 段 比 降 忆 

和 ”河床 形态 .3B/7 和 床 沙 组 成 四 一 已: 

自 ”人 类 活动 的 影响 。 


在 上 述 因素 中 ,前 4 个 因素 对 不 同 的 河流 影响 的 程度 是 不 相同 的 .对 冲积 性 平原 河流 ， 
第 1、 第 2 两 个 因素 起 主导 作用 。 对 于 山区 河流 ， 第 3 和 第 4 两 个 因素 常 起 主要 作用 。 第 5 
个 因素 对 河 段 冲 浴 的 影响 ， 视 不 同情 况 ， 其 影响 程度 和 范围 不 同 。 

在 上 述 各 因素 中 ， 河 段 平 均 比 降 难 以 获取 ， 但 是 ， 比 降 的 变化 与 研究 河 段 的 上 下 游 水 
位 密切 相关 ， 而 上 游 水 位 与 上 游 流量 通常 具有 相关 性 ， 人 工 神经 网 络 要 求 各 输入 因 于 相互 
独立 ,因此 上 游 水 位 不 计 入 输入 因子 ,下 游 水 位 Z 视 为 一 个 输入 因子 。 床 沙 组 成 与 推移 质 
输 沙 率 密切 相关 ， 因 为 获得 长 期 床 沙 组 成 逐年 变化 的 资料 不 容易 ， 而 选 推移 质 输 沙 率 作为 
输入 因子 。 河 道 浅滩 演变 预测 的 人 工 神经 网 络 模型 的 输入 因 了 于 有 : &28 一 nnCG 一 Bo 一 


P,vE/E 和 Z。 于 是 ， 浅 滩 断 面 年 内 最 小 水 深 瑟 an 和 年 平均 淤积 厚度 AZ 可 表示 为 : 


百 = 厂 CC~-rG,G-8E ~P8e VB1/ Zn) 
47Z=j OO-nGG-HE -PigVB/ HZD) 
对 于 具体 的 研究 河 段 ， 视 问题 的 具体 情况 ， 还 可 以 对 上 述 因子 做 进 一 步 的 取 合 。 


2. 样本 中 各 因子 的 获取 

在 浅滩 断面 年 内 最 小 水 深 和 年 平均 淤积 厚度 预测 模型 建立 中 ， 输 入 和 输出 因子 的 获取 
是 关键 环节 。 一 般 而 言 ， 系 统 和 输入 因子 中 ; 如 CQ 一 5GG 一 bd 一 疡 和 Z 为 水 文 资料 ， 可 从 
研究 河 段 上 下 游 水 文 站 获取 。gw 天 /让 和 总 an, 利用 地 理 信 息 系 统 技术 和 图 像 处 理 技术 ， 通 
过 研究 河 段 多 年 的 地 形 图， 并 进行 数字 化 处 理 ， 得 到 数字 化 冲 洪 等 值 图 和 栅 格 地 图 ， 选 取 
每 年 的 线 滩 部 位 进行 统计 来 获取 。 

由 于 是 选取 年 平均 情况 作为 样本 因子 进行 预测 计算 ， 因 此 所 需 资料 时 间 系 列 较 长 ， 常 
常会 出 现 具有 代表 性 的 某 一 年 份 的 地 形 资 料 缺 测 或 遗失 。 这 时 可 采用 水 深 遥 感 技术 ， 对 缺 
损 地 形 图 的 年 份 进行 插 补 。 具 体 步 又 如 下 。 

(1)》 选取 与 缺 测 年 份 相 邻 的 前 后 各 一 个 年 份 的 同期 或 相近 时 期 的 资料 。 

(2) 用 敏 测 年 谷 相 邻 的 前 一 年 和 后 一 年 的 实测 地 形 资料 确定 水 次 遥感 模式 ， 并 分 别 反 
演出 两 个 时 相 的 遥感 水 深 。 

(3) 对 缺 测 的 那 一 年 ， 采 用 “异地 率 定 ”方法 率 定 水 深 遥 感 模式 中 的 系数 。 方 法 一 : 
选取 与 卫 片 资料 相近 时 斯， 浅滩 河 段 相 邻 水 域 有 实测 资料 的 断面 《如 水 文 站 点 的 大 断面 
进行 模式 率 定 ;方法 二 ， 选 取 与 浅滩 河 段 相 邻 或 本 河 段 内 地 形 基 本 稳定 、 变 化 很 小 的 部 分 





求 域 进行 模式 率 定 。 

41 有 几率 定 后 的 来 谋 迁 感慨 式 反 项 缺 测 的 敢 一 年 的 水 下 地 形 。 

【sT 用 相 邻 的 3 个 年 份 各 感 水 深 计 算 两 两 之 间 的 冲 沧 值 ， 并 在 地 理 信息 系统 中 产生 冲 
潍 等 值 图 ， 供 这 计 贱 汪 上 有 革 地 理 信 息 的 使 用 ， 

3. 记 例 他 析 

这 里 以 某 河 慨 为 研究 对 象 ， 读 河 杂 笨 床 由 中 四 冰 组 成 ， 岸 宣 多 帖 土 和 被 土 ， 抗 冲 性 王 ， 
局 午 塌 。 从 恤 福 素 源 ， 河 床 多 年 的 稍 变 情况 ， 以 芒 从 泥 沙 数学 柜 拟 和 物理 模型 试 又 的 结果 
看 ， 河 朋 河 床 社 变 以 推移 形 武 为 主 。 河 由 进口 厅 六 地 水 嘉 站， 出口 受 且 地 水 亿 站 榨 制 ， 水 
嘉 资 料 茧 取 方便 。 此 外 ， 相 河 妇 还 有 较 吉 年 份 的 地 形 资 料 ， 为 河床 边界 条 件 提供 了 资料。 

对 于 具体 的 研究 河 慨 ， 上 述 两 式 中 的 影响 国 子 还 需 进 一 步 分 析 迁 取 。 访 河和 朋 河 床 的 冲 
浴 枝 形 以 底 泗 为 主 ， 吕 一 和 已- 的 变化 主要 对 悬 狂 冲 浴 变化 显著 的 河 层 影响 较 太 ， 而 对 
底 普 种 杂谈 化 主 的 河 段 及 响 相 对 较 小 ， 加 之 预 铀 的 是 年 平均 情况 ， 因 此 ， 和 一 和 后 一 ! 
对 河床 种 淋 的 尺 击 可 息 栈 不计。 就 年 变化 情况 而 言 ， 输 六 因子 中 的 来 琉 量 取 年 平均 流量 ， 
来 沙 量 到 年 总 输 让 量 ， 河 及 来 沙 组 成 吕 一 户 在 加 世 抒 加 年 代 与 昭 年 代 基 本 一 致 ， 功 世 
天 晤 年 他 以 后 受 求 口 天 圳 匣 未 发 昌 影响, 与 全 年 代 鹿 示 蛆 成 有 所 差别 , 但 台 年 代 与 2000 
年 的 记 宰 组 成 基本 一 致 ， 预 副 样 本 所 选 时 由 为 1990 一 2000 年 ， 在 此 时 段 内 ， 示 一 户 对 不 同 
年 份 河床 冲 襄 的 影响 可 以 不 计 。 从 推移 质 输 让 素 炉 经 网 络 模型 试验 研 容 看 ，gu=f (来 水 条 
件 ， 案 沙 符 件 ， 河 床 和 达 界 条 件 ， 输 外 反 局 条 件 ， 出 鳃 反 镭 条件 )， 也 就 是 说 推荐 质 输 冰 率 不 
是 真正 意 六 上 的 台 喜 变量 ， 因 此 ， 品 也 可 以 去 岳 。 这 样 ， 上 还 两 式 中 的 影 唤 国 子 齐 简 化 为 
全 ， 总 ， 二 和 下/ 而。 

庐 河 慨 输 六 因子 中 心 , 忠和 古 从 生地 和 台地 的 水 训 站 获取 。 有 ，Fis 和 Az 从 航 
道 图 和 冲 兴 等 值 图 中 提取 。 样 本 是 研究 对 象 与 同 络 模 型 的 接口 。 正 确 选 取 调 练 样本 是 非常 
重要 的 一 步 ， 它 包括 样 未 特征 选取 及 样本 数目 确定 。 样 本 特征 应 该 能 很 好 地 反映 这 类 问题 
的 基 未 特征， 下 人 己 在 训 蝶 区 内 有 代表 性 ， 而 且 在 预 天 区 内 有 普 忆 性 。 这 要 求 富 滩 演变 预测 
样本 具有 普遍 性 ， 又 要 考虑 特殊 水 立 现 急 的 影响 。 该 河 段 于 1989 年 开始 建 水 口 电 站 ， 建 电 
站 以 后 河 且 的 往 变 受 电 站 蜗 响 ， 考 噶 到 这 一 人为 因素 影 听 ， 研 究 时 段 选 1990 一 2000 年 . 在 
这 11 芋 里 ， 访 疝 段 水 立 动 力 因 素 变 化 大 ， 既 有 电站 攻 水 影响 ， 允 包 告 了 各 御 水 文 天 件 的 变 
性 情况 ,还 己 音 有 来 永康 流 各 种 组 音 情 况 ， 样 本 具有 一 致 性 。 此 外 ,在 过 一 时 段 中 ，1992 
年 元 丰 水 不 沙 年 ，1996 年 为 小 水 少 沙 年 ，1998 年 为 该 河 段 所 在 流域 特大 祺 水 中 训 年 ， 也 雪 
虑 了 特 屿 性 。 因 此 ， 该 时段 的 样本 允 衣 性 能 比较 好 ， 基 本 上 条 瘟 了 研究 河 毁 的 各 种 水文 情 
况 ， 杞 测 样本 从 水 立 条 件 的 变化 看 茎 有 代表 性 也 有 普 所 性。 根据 样本 数据 选取 原则 ， 选 搓 
1990-1999 年 的 监 据 作为 同 络 训练 样本 ， 如 雪 引 3 所 示 。 


于 和 宇 3 虱 本 数据 





站 而 画 二 1 
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获得 样本 数据 向 重 后 ， 册 于 其 中 各 个 指标 互 不 相同 ， 不 始 样本 中 各 向 量 的 数量 级 差别 
概 大 ， 为 了 计算 方便 及 防止 部 分 神经 元 达到 过 候 和 状态 ， 在 研究 中 对 样本 的 输入 进行 归 一 
化 让 理 。 

可 以 利用 MATLAB 实现 向 量 的 归 一 化 过 程 ， 这 里 寿 样本 数据 都 归 一 化 到 区 间 I0 之 
间 。 和 地 P 妻 示 输 入 向 量 ，T 表示 目标 向 量 ， 归 一 化 代码 为 






接 下 素 设 计 网 阁 的 拓 非 早 梅 ， 直 于 单 隐 导 BF 网络 的 非 线性 连 射 能 力 比较 导 ， 这 里 采 
用 单 陷 屋 的 掉 色 网 归 ， 而 中 间 层 的 术 皮 元 个 败 需 要 通过 实验 来 确定 。 由 于 答 六 神经 元 有 站 
让 ， 所 以 申 间 层 神 总 元 企 数 永 访 在 氏 ] 二 之 间 。 因 此 , 这 里 为 中 间 层 神 皮 元 个 数 选 择 了 个 值 ， 
分 别 为 9 二 和 15， 并 分 别 检 查 网 络 性 能 。 

布 同 个 琢 的 隐 单 元 组 成 的 BP 网 络 训 儿 曲线 分 别 嫩 图 由 5 且 厂 和 全 7 所 示 。 通 过 比较 
监 现 ， 中 间 层 杭 蚂 元 个 灼 为 和 1 时 ， 网 络 的 收 痪 速度 比较 快 。 
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本 者 由 hi 妆 浊 二 站 


表 上 襄 厢 2 动员 订 栅 贞 
ae | 和 
图 由 5 训 丸 误 基 商 线 【 隐 单 元 败 ，9 


PTrranec 人 ii 了 了 机 ETe5] Do 可口 


aa 丽 ii 顺 请 3 jp 5 0 .40 60 
硬 亲 Epoia 


| 
图 有 在 调 疙 齐整 曲线 【 陷 单 元 烙 ， 134 


Perarem 甸 下 E20WFED1T 二 5 溃 击 


aa 加 条 证 3 ED SB 0 由 对 5 
国 疝 EPEEhs 


图 本 7 了 调 妖 误 监 曲 赋 【 陷 单 元 灼 ， 151 


同上 加山 认 
接 下 来 观察 网 络 的 预 届 性 能 ， 在 表 ?93 中 的 样本 数据 中 近 取 1990 年 ，1992 年 、1994 
年 、1996 年 .1997 年 和 1999 年 的 数据 作为 网 妆 的 测试 数据 ， 预 测 误 差 曲 鲍 如 图 后 & 所 示 。 


人 


图 9 商 沽 误 私 曲线 


由 图 9.8 可 见 ， 不 同 结构 的 BP 网 络 的 预测 误差 都 为 0， 这 是 因为 测试 样本 是 从 训练 样 
未 中 选取 的 。 由 于 训练 的 精度 非常 高 ， 网 络 对 每 一 组 数据 都 精确 地 拟人 了 ， 所 以 出 现 预 测 
误 莽 为 0 的 情况 。 要 更 准确 地 测试 网 绍 的 性 能 ， 必 须 从 调 练 样本 以 外 的 数据 樟 本 中 选取 测 
试 样本 。 
本 实例 的 完整 MATLAB 代码 为 ， 
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94.2 基于 RBF 网 络 的 该 变 预测 


上 节 介 绍 了 如 何 利 用 BP 阅 络 进行 演变 预测 ， 可 以 看 出 ，BP 网 络 预测 精度 比较 商 ， 但 
训练 误差 收 笋 比较 慢 。 本 节 基 于 同样 的 背景 ， 营 试 利用 RBF 网 络 进行 痊 变 预测 ， 

由 于 输入 向 量 P 和 目标 向 量 T 都 已 经 获得 ， 因 此， 创建 同 络 之 前 他 一 需要 确定 的 就 是 
径 向 基 函 雪 的 分 布 密度 SPREAD。 由 于 SPREAD 的 选择 对 网 络 性 能 有 着 比较 重要 的 影响 ， 
因此 ， 这 里 通过 选择 才 个 不 同 的 SPERAD 来 确定 最 佳 值 。MATLAB 代码 如 下 ， 


上 述 代 码 一 共 创 建 了 5 个 RBF 网 络 ， 径 向 基 函 数 的 分 布 密度 分 别 为 1.2.3,4.5。 输 出 结 
果 为 ， 





0 从 的 状 作 拓 检 站 相 5 
面 面 曙 全 和 人 -一 一 一 






“所 有 网 络 对 结果 的 预测 孝 是 一 致 的 , 这 是 因为 调试 数据 就 竺 于 调 练 数据 ,而 函数 newrbe 
建立 了 一 个 准确 的 RBF 网 络 , 为 了 更 加 维 确 地 测试 网 络 的 预 抽 性 施 ， 需 要 从 其 他 水 文 资料 
寻 接 与 训 蝶 样本 不 一 致 的 样本 数据 ， 


9.4.3 结论 


利 紧 浆 晓 作为 一 种 输 六 /输出 的 高 度 非 蚂 性 枫 射 ， 通 过 对 作用 函数 的 密 寥 复 台 实现 了 
岳 沪 少 变 预 抽 中 输 六 与 输出 之 间 的 高 度 非 线性 映射 。 它 具有 以 下 的 忱 点 : 

Li 平 需要 建立 线 滩 这 变 的 琢 学 方程 。 

【21 具有 自 适应 性 和 学 习 功 能 ， 

137 标 型 预 抽 的 规律 受 样 订 的 性 质 影 响 ， 只 要 样本 选择 得 当 ， 模 型 预 副 精度 就 由 网 络 
结构 确定 。 

本 例 司 用 的 是 P 网 绍 和 RBFE 网 妾 模型 ， 竖 过 对 革 河 自 的 谊 变 预 测验 算 ， 其 销 果 与 襟 各 
计算 值 唤 侣 理 四 。 室 验 表 明 ， 利 用 BP 神经 网 络 和 RBF 神经 网 阁 模型 对 诚 竣 变 化 进行 筷 测 
是 可 行 的 。 


9.5 地 震 预 报 的 MATLAB 实现 


地 震 预 报 是 地 理 问 题 研究 镇 域 中 一 个 重要 课 古 ， 准 确 的 地 震 预报 可 以 帮助 人 们 及 时 采 
到 有 效 措施， 降低 人 员 伤 亡 和 经 济 损 和 失 。 引 发 地 需 的 相关 性 因素 很 多 ， 其 产生 机 理 的 复杂 
性 、 孕 育 过 程 的 非 线 性 和 认识 问题 的 困 奸 性 使 得 人 们 很 难 建立 较 完 费 的 物理 理论 模型 。 对 
有 其 物理 参数 加 以 精确 的 描述 ， 只 能 借 曲 一 些 观测 到 的 相关 再 铺 进 行 欠 析 、 总结 和 推理 。 
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相对 于 传统 的 预报 方法 ， 神 经 网 络 在 处 理 这 方面 问题 中 有 者 独特 的 优势 ， 主 要 体现 在 : 

1 骞 错 能 力 强 。 由 于 网 络 的 知识 信息 采用 分 布 式 存储 ， 个 别 单 元 的 帆 坏 不 会 引起 旺 
出 错误 。 这 上 戟 使 得 预测 或 识别 过 程 中 客 错 能 力 强 ， 可 草 性 高 . 

27 预测 或 识别 速度 快 。 训 练 好 的 网 络 在 对 未 和 后 样本 进行 预测 或 识别 时 仅 需 要 少量 的 
加 法 和 丢 法 ， 使 得 其 运算 速度 明显 快 于 其 他 方法 。 

31 豆 开 了 特征 因素 与 判别 目标 的 复杂 其 系 描述 ,特别 是 当 式 的 表述 。 网 络 可 以 自己 
学 习 和 记忆 各 牺 六 量 和 输出 量 立 间 的 关系 。 

本 节 糙 根据 某 地 的 地 震 资料 ， 研 究 如 何 利用 神 既 网 络 工具 箱 ， 实 现 基 于 神经 网 络 的 地 
震 预 报 。 


9.5.1 概述 


以 禾 国 西南 某 地 震 常 发 地 区 的 地 震 次 时 作为 样本 来 产 , 实 理 基 于 神 既 网 剃 的 地 需 厅 报 
根据 这 些 地 震 窗 料 ， 提 取出 了 个 预报 因子 和 守 际 发 生 的 震级 果 作为 输入 和 目标 向 量 。 预 报 
困 子 为 

重 半年 内 是 六 3 的 地 需 早 计 频 度 ， 
半年 内 能 量 杰 旋 积 黑 值 ， 

b 佳 ; 

异常 地 震 和 群 个 娄 ， 

了 地震 条 带 个 烙 ; 

是 否 处 于 请 动 其 内; 
丰美 地 震 区 地 喜 震 贤 。 

一 扑 收 捷 了 划 0 个 学 习 样 床 ， 如 囊 下 4 所 示 。 


惠 呈 4 学 习 需 例 


1 FT 古人 人 三 下 = = Re 所 本 一 一 
| 二 | 十 时 入 | 用 让 | 。 王 | 间 国 | 9 | | 1 中 有 | 时 | 
四 和 上 = 有 二 本 本 





甫 94 中 的 前 了 项 为 学 习 梯 检 中 的 得 六 因子 ， 输 出 国 子 为 实际 震 明 ， 利 用 上 考 中 的 学 
习 震 例 对 同 络 进行 训练 。 在 名 蝶 彰 ， 应 访 对 数据 进行 归 一 化 处 理 ， 表 934 中 数据 已 经 是 归 
一 化 后 的 数据 了 ， 
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3.5.2 BP 网 络 设计 


还 是 采用 单 隐 层 的 BP 网 络 进行 地 震 预 届 。 由 于 和 输入 样本 为 7 维 的 输 六 向 量 ， 因 此 ， 
输入 层 一 共有 ?7 了 个 神经 元 ， 则 中 间 屋 应 该 有 1 个 村 经 元 ， 网 络 只 有 1 个 输出 数据 ， 则 输出 
屋 只 有 1 个 利 经 元 。 因 此 ， 网 络 应 该 为 7x 15 世 1 的 早 虱 。 技 照 BP 网 阁 的 一 般 设 计 原 则 ， 
中 间 层 神经 元 的 传 通 函数 为 5 型 正切 函数 ， 由 于 输出 已 盾 归 一 化 到 区 闻 [0,1j 中 ， 因 此 ， 四 
出 层 神 皮 元 的 忧 道 函数 可 以 设 定 为 $ 型 对 数 函 数 ，。 利 用 如 下 代码 创建 一 个 符 台 上 壕 要 求 的 





TrainipCrTrrrrrrTgem 
该 函数 以 梯度 下 降 法 进行 学 习 ， 并 且 学 习 速 率 是 自 适 应 的 ， 

中 间 层 的 神经 元 个 数 是 很 难 确 定 的 ， 而 这 又 在 很 大 程 诬 上 影响 着 网 络 的 预 漂 性 能 。 这 
里 首先 取 15 个， 然后， 观察 网 阁 性 能 ， 之后， 再 分 别 取 10 和 20， 井 与 此 时 的 预测 性 能 进 
行 比较 ， 检 验 中 间 层 神 蚂 元 个 数 对 网 络 性 能 的 影响 。 当 网 络 的 预 油 误 浆 最 小 时 ， 网 阁 中 同 
层 的 神 既 元 数 日 就 是 量 佳 值 。 


.5.3 BP 网络 训斥 与 测试 


对 于 上 一 小 节 得 到 的 同 络 ， 利 用 表 94 中 的 数据 进行 训练 。 训 练 后 的 网 络 才 有 可 能 满 
足 密 际 应 用 的 要 求 。 训 练 参 数 的 设 定 如 要 95 所 示 ， 其 他 秦 数 取 默 认 值 。 


囊 %3 训 蝶 参数 





变量 P 和 T 分 别 表示 网 络 的 输入 向 量 和 目标 向 量 ， 它 们 是 从 表 9.4 中 得 出 的 。 训 练 结 
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| | | 

而 一 一 昌 硬 看 市 十 - 
二 相 攻 半 汉 机 二 = 二 Te 

、 


可 蝎 经 过 270 次 训练 后 ， 网 络 的 目标 误差 达到 要 求 ， 如 图 9.9 所 示 。 
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图 蒜 95， 训 撕 央 果 
网 络 训 虹 早 东 后 ， 还 必 频 利用 另外 一 组 地 震 数 据 对 其 进行 测试 ， 数据 如 圾 9-6 所 示 。 
所 亩 测试 ， 实 际 上 是 利用 仿真 函数 来 斐 得 网 络 的 办 由， 然后 检查 输出 和 实际 测量 值 之 问 的 
席 关 是 天 请 足 要 求 ， 
调试 代码 为 





输出 结果 经 过 反 归 一 化 好 理 后 得 到 祯 报 震 级 ， 和 实际 震级 相 比较 可 得 到 网 络 的 预报 误 


了 了 风 
和 | 


站 而 前 画 到 
1 


囊 汪 7 预 往 误 兰 





由 可 外 7 可 见 ， 网 阁 的 预报 误差 比较 小 ， 因 此 ， 性 能 可 以 镁 足 实际 应 用 的 要 求 。 预 报 
误差 曲线 如 图 中 10 所 未 。 


0 上 


小 芋 


旺 呈 下 站 晤 7 


图 林 但 网 绍 的 预报 襄 攻 


接 下 来 糙 网 绍 中 间 层 数目 设置 为 葡 和 ， 并 和 分别 进行 训练 和 人 迟 真 ， 得 副 如 下 一 蛆 训 
练 误差 曲线 和 预 届 讽 竹 曲 线 。 其 中 ， 刀 图 于 11 所 示 ， 轩 中 间 层 神 到 元 个 数 直 10 的 情况 下 
的 训练 误差 曲线， 如 图 所 12 所 示 ， 为 中 间 屋 神经 元 个 数 为 20 的 情况 下 的 训 蝶 误差 曲线 , 
妇 图 旦 13 所 示 ， 为 两 者 误 莹 对 比 曲 线 . 

此 时 针对 测试 琢 据 得 到 的 仿真 结果 为 ， 













可 见 ， 这 种 情况 下 网络 的 预报 误差 比 较 大。 


上 


有 


PT 和 局 相 让 全 让 


站 酌 1 号 1 月 到 中 到 器 


| Cn 
图 平 中 贡 屿 课 蔓 向 二 【中 间 怕 神 晕 元 数目 :101 
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自 上 1 动 1 2 到 思 
aas 二 
图 地 1 垃 唱和 练 误 攻 此 研 了 中 同 屋 樟 芝 元 星 国 2320) 
此 时 间 纤 的 迟 真 结果 为 : 


可 见 误差 非常 大 ， 特 3 种 情况 下 的 误 关 进行 对 比 ， 如 图 电 13 所 示 ， 可 见 中 间 层 神经 元 
不 数 为 15 时， 网络 的 预 负 性 能 最 好 。 

这 也 证 明了 一 个 重要 的 结论 ， 未 是 中 间 层 神 闻 元 个 数 的 增加 ， 虽 然 可 以 提高 网络 的 肌 
射精 应， 但 并 不 意味 着 一 定 就 会 提高 阿 络 的 性 能 。 因 此 ， 我 们 在 设计 BP 网 络 时 ， 不 能 无 
限制 地 增加 中 间 层 神经 元 的 个 数 ， 
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氢 铀 误 蔓 对 比 曲 战 
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9.54 ”地震 预测 的 竞争 网 络 模型 


自 粗 织 竟 革 神 如 网 络 能 能 对 输入 模式 进行 自 组 织 训练 和 判断 ， 并 特 其 最 话 分 为 和 同 的 
类 型 。 与 BP 杆 凤 网 上 路 方法 相 比 ， 这 御 自 组 织 ， 自 适应 的 学 习 能 力 进 一 步 折 宽 了 了 人工 棉 经 
网 疼 在 模式 识别 .区 区 方 面 的 应 用 。 在 地 震 欢 报 中 ,有 时 兰 要 根 记 各 种 地 震 语 动 性 指标 【人 香 
播 前 非 指标] 将 澳 生 在 乎 同时 间 。、 空间 和 和 强度 的 地 需 进 行 归 业 研 窜 ， 根 据 这 些 样 本 的 特 证 
对 其 他 样本 进行 外 推 而 报 。 分 类 方 注 有 模 师 聚 类 ， 投 尺 寻 足 和 入 坚 网 阁 等 。 这 里 采用 自 岂 
娟 竞争 网络 财 某 地 的 震 例 进行 分 类 研究 。 

利用 自 蛆 意 争 网 阁 进 行 地 城 预报， 首先 应 该 提取 有 甘地 项 两 报 的 重要 指标 ， 靖 定 网 
凋 晴 构 。 这 里 以 我 国 革 地 及 其 部 近 地 区 从 1978 年 到 1989 年 的 地 震 趋 势 作 注 检 验 实 例 ， 研 
究 的 时 间 为 1 年 ， 所 球 的 11 项 地 震 络 动 指 妹 为 ; 

和 次 丈量 记 的 地 震 震 级， 

二 值 : 

平均 震 启 ; 

平均 师 座 ; 

平均 师 度 偏差， 

平均 经 庆 ， 

平均 经 度 恼 攻 ; 

最 大 地 震 震 缀 ; 

ML 大 于 115 的 地 震 次 娄 ; 

相左 西 年 的 些 震 识 台 差 ， 当 冯 财 值 超过 均值 一 沾 量 时 ， 先 陈 以 . 再 取 卡 ， 

生 。” 相 韩 两 年 最 大 地 需 的 震级 莽 ， 当 其 为 负数 时 作 矢 由 i 钼 理 ， 

所 有 的 实际 地 条 数据 如 甫 8 所 示 。 利 用 前 吉 年 的 履 纪 估 机 竞争 训练 ， 量 后 1 年 的 数 
据 作 为 测试 样本 。 技 厦 震 裔 的 友 小 分 为 : 一 般 地 震 。、 中 等 地 震 和 严重 地 震 3 赞 ， 因 此 这 里 
需要 放置 神经 元 数目 为 了 个 。 为 了 加 快 学 习 速 度 ， 和 将 学 习 速 率 设 定 为 各 1。 甫 和 8 的 数据 是 
已 既 娄 一 化 站 理 以 后 的 归 据 。 


硬 面 夯 硬 间 硬 生性 秋 
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代码 的 输出 时 果 为 ， 


由 此 可 见 ， 囊 朱 8 中 第 1 3 4 和 1 行 属于 一 类 ， 即 1978 年 、1980 年 ，1981 年 和 1983 
年 属于 一 类; 2、7 行 即 1979 年 和 19 曙 年 属于 一 类 。 其 余 的 ，1982 年 19 是 年 ，1987 年 
利 | 1 全 年 属于 一 上 类。 直接 检查 胡 中 的 整 据 ， 我 们 会 鉴 现 届 于 同一 类 前 数据 是 比较 相 慨 的 ， 
这 也 验证 了 以 上 分 类 的 鱼 果 ， 

利用 竞争 型 网 络 进行 预报 的 原理 为 ， 通 过 训练 样 素 对 网 络 进 行 刘 氏 ， 训 练 好 的 网 络 中 
记忆 了 所 有 的 分 类 模式 。 当 输 闪 一 个 新 的 样本 后 ， 注 发 了 对 应 的 神经 元 ， 就 可 以 对 新 的 样 
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素 进行 这 业 ， 在 素 例 中 ， 可 以 预报 地 喜 属 于 吁 一 级 。 
接 下 来 利用 同 络 预 副 1989 年 地 震 属 于 哪 一 级 ,， 灾 际 上 这 也 是 对 网 妾 进行 持 试 。 通 过 直 
接 进 行 昌 据 对 比 ， 要 们 让 为 19 和 9 年 的 震 裔 砂 访 和 1978 年 的 一 吾 ， 国 为 两 年 的 整 据 非 常 接 
近 。 代码 如 F，， 







全 全 








了 二 
网 络 有 者 比较 好 的 预报 精度 。 


9.6 ”交通 运输 能 力 预 测 的 MAILAB 实现 


运输 系 姬 作为 社会 经 济 系 统 中 的 一 个 子 系统 ， 在 受 外 界 因素 影响 和 必用 的 同时 ， 对 外 
部 经 济 系统 也 具有 一 定 的 反作用 ， 司 得 运输 需求 同时 受到 来 自 运 输 系 统 肉 外 两 方面 因素 的 
影响 ， 作 为 运输 基础 设施 建设 投资 决策 的 基础 ， 适 输 需 求 预 届 在 国家 和 区 域 经 济 发 展 规划 
中 具有 十 分 重要 的 作用 。 其 中 ， 由 于 货物 运输 ， 地 方 经 济 及 企业 监 展 的 紧密 联系 ， 贡 运 需 
求 预 测 成 为 贵 运 需求 和 经 济 发 展 头 系 研 究 中 的 一 个 重要 问题 。 因 此， 作为 反 英 货物 运输 逢 
求 的 一 项 重要 指标 ， 贵 运 量 预 独 研 究 和 分 析 具 有 较 强 的 塞 际 意 史 。 


961 背景 概述 


输出 结果 为 *=3， 击 此 可 网， 


从 蔓 运 量 的 产生 训 看 , 它 是 外 部 经 放 需 求 和 运输 系统 供给 两 方面 因 束 共同 作用 的 早 果 。 
从 外 部 既 济 系 峡 的 作用 看 ， 在 既 济 体系 内 部 存在 许多 影响 货运 需求 的 因素 ， 将 这 些 因 束 归 
纳 起 来 ， 有 了 两 大 部 分 :一 部 分 属于 各 种 经 济 总 量 因 素 ， 如 国民 经 济 监 展 规 横 ， 工 业 发 展 规 
模 及 基建 规模 等 ， 另 一 韶 分 属于 各 种 既 济 结 风 因素 ， 如 产业 早 构 ， 工 业 晴 构 等 。 货 运 需 求 
不 羽 受 国民 经 济 总 量 的 臂 啊 ， 还 要 受 经 镜 结构 因素 的 影 遇 。 从 内 部 运输 系统 的 作用 来 看 ， 
也 存在 娄 健 情况 。 固 此 ， 旭 运 量 影 响 因 震 总 性 上 可 分 为 规模 因素 和 结构 因素 两 类 ， 其 中 寻 
构 类 因素 主要 体现 在 产业 结构 和 运输 结构 上 ， 产 业 结 构 中 量 主要 的 是 工业 结构 。 在 国民 经 
济 鉴 展 的 不 同 阶段 ， 规 模 固 到 和 结构 因素 在 货运 量 增长 中 所 起 的 作用 也 种 同 ， 黄 运 量 的 增 
长 变化 也 时 现 不 同 的 带 式 。 同 时 ， 由 于 运输 市 场 中 供需 非 均 衔 性 客 型 存在 ， 内 外 部 系统 对 
货运 量 的 影响 程度 不 一 ， 而 且 由 于 作用 形式 复杂 ， 这 就 性 得 货运 量 预测 具有 较 去 的 复杂 性 
和 非 线性 等 特点 。 

常用 的 潍 运 量 预 负 方 法 包括 时 间 序 列 方法 【移动 平滑 法 、 指 歼 平 滑 法 和 随机 时 间 序 列 
方法 )，、 相 关 【 回 归 } 分 析 法 . 京 色 预 测 方 法 和 作为 多 种 方法 纤 侣 的 组 台 预 铀 方法 等 。 这 些 
方法 大 都 妮 申 在 对 其 因果 关系 回归 槛 型 和 时 间 序 列 模型 的 分 析 上 ， 记 建立 的 模型 不 能 全 面 
和 本 质地 反映 所 预测 动态 数据 的 内 在 结构 和 复杂 特性 ， 从 而 丢失 了 信息 量 ， 信 工 神 色 网 络 
作为 一 种 并 行 的 计算 则 型 ， 具 有 心绪 建 惯 方法 所 不 具备 的 很 包 优点 ， 有 很 好 的 非 线 性 瞻 射 
能 力 ， 对 害 建 模 对 象 的 径 验 知识 要 求 焉 才 ， 一 般 不 必 事 先知 道 有 关 詹 建 模 对 和 的 结构 ， 参 
数 和 动态 特性 等 方面 的 知识 ， 只 贰 给 出 对 象 的 输入 /输出 数据 ， 通 过 网 络 身 的 学 习 功 能 就 
可 以 达到 办 六 与 鱼 出 的 贞 射 关系 ， 
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0 
中 运 量 预 汕 可 以 利用 BP 网 络 和 RBF 网 络 模型 得 是 这 两 种 网 络 在 用 于 预测 时 ， 存在 
收 黎 速 度 爆 和 局 部 极 小 的 缺点 ， 在 解决 样本 量 少 且 了 噪声 较 多 的 问题 时 ， 效 果 并 不 理想 。 广 
义 回 归 神 经 网 络 GRNN 在 逼近 能 方 、 分 类 能 力 和 学 习 速 度 .上 较 BP 网 络 和 RBF 网 络 有 着 较 
强 的 优势 ， 网 络 最 后 收 伺 于 样本 量 集聚 较 多 的 优化 阿 归 面 ， 并 且 在 样本 数据 缺乏 时 ， 预 测 
效果 也 比较 好 ， 此 外 ， 网 络 还 可 以 处 理 不 稳定 的 数据 。 因 此 ， 本 例 党 试 利 用 GRNN 建立 预 
测 模型 ， 对 货运 量 进行 预测 。 
9.6.2 ”网 络 创建 与 训练 
GRNN 《广义 回归 神经 网 络 ) 的 结构 如 图 3-26 所 示 。 网 络 的 第 一 层 为 径 向 基 隐 售 层 ， 
神经 元 个 数 等 于 训练 样本 数 ， 该 层 的 权 值 函数 为 欧 氏 距离 图 数 《 用 lldistl 表 示 )， 其 作用 为 


计算 网 络 输入 与 第 一 层 的 权 值 Pi 之 间 的 距离 ， 妨 为 降 含 层 的 阅 值 。 符 号 “。 表示 lldistl 
的 输出 与 阐 值 六 之 闻 的 关系 。 隐 含 层 的 传递 函数 为 径 向 基 函 数 ， 带 常 采 用 高 斯 函数 作为 网 


络 的 传递 函 教 ， 
上 x 一 c 外 
尺 [xz)= exp - 元 ] 


其 中 ，a 决定 了 第 个 隐 含 层 位 置 中 基 函 数 的 形状 ，G; 越 大 ， 则 基 函 数 越 平滑 ， 所 以 又 称 


: 乏 








为 光 清 因 了 于 。 

网 络 的 第 二 层 为 线性 输出 层 ， 其 权 函 数 为 规范 化 点 积 权 函数 《用 nprod 表示 )， 计 算 网 
络 的 向 量 妈 ， 它 的 每 个 元 素 就 是 向 量 ad 和 权 值 矩阵 ZW2. 每 行 元 素 的 点 积 再 除 以 向 量 a 的 
各 元 素 之 和 得 到 的 ， 并 将 结果 到 提供 给 线性 传递 函数 e=purelin(* )， 计 算 网 络 输出 。 

GRNN 连接 权 值 的 学 习 修正 仍然 使 用 BP 算法 , 由 于 网 络 隐 含 层 结 点 中 芍 作 用 函数 (《 基 
函数 ) 采用 高 斯 函数 ,高 斯 函数 作为 一 种 局 部 分 布 对 中 心 径 向 对 称 衰减 的 非 负 非 线性 函数 ， 
对 输入 信号 将 在 局 部 产生 响应 ， 即 当 输入 信和 号 靠近 基 函 数 的 中 央 范 围 时 ， 隐 含 层 缚 点 将 产 
生 较 大 的 输出 ， 直 此 看 出 这 种 网 络 具 有 局 部 远近 能 力 ， 这 也 是 该 网 络 之 所 以 学 习 速 度 更 快 
的 原因 。 此 外 ，GRNN 中 人 为 调节 的 参数 少 ， 只 有 一 个 阐 值 ， 网 络 的 学 习 全 部 依赖 数据 样 
本 ， 这 个 特点 决定 了 网 络 得 以 最 大 限度 地 避免 人 为 主观 假定 对 预测 结果 的 影响 。 

根据 对 关于 货运 量 影响 因素 的 分 析 ， 这 里 分 别 取 国内 生产 总 值 GDP、 工 业 总 产值 、 铁 
路 运输 线路 长 度 、 复 线 里 程 比重 、 公 路 运输 线路 长 度 、 等 级 公路 比重 、 铁 路 货车 数量 和 民 
用 载 货车 辆 数量 等 8 项 指标 作为 货运 量 的 影响 因子 ， 以 货运 总 量 、 铁 轮 货运 量 和 公路 货运 
量 做 出 货运 量 的 输出 因子 ， 即 网 络 的 输出 。 由 此 构建 GRNN， 由 于 光滑 因子 也 可 以 影响 网 
络 的 人 性能， 因此 这 里 需要 不 断 进 行 尝试 来 确定 最 佳 值 。 

根据 上 面 确 定 的 网 络 输入 和 输出 因子 , 利用 1995 一 2001 年 共 ?7 年 的 历史 统计 数据 作为 
网 络 的 训练 样本 ，2002 一 2003 年 间 共 > 年 的 历史 统计 数据 作为 网 络 的 外 推测 试 样本 。 输 入 


样本 和 目标 样本 如 表 9-9 所 示 。 
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杆 志 燥 是 【目标 样 桔 ) 


开外 9 【【 翅 ) 





利用 以 下 代码 尾 上 雪 中 的 数据 归 一 化 到 区 闸 上 ,1] 中 ， 需 要 注意 的 是 ， 对 于 已 经 位 于 区 


间 [o,] 的 数据 ， 无 需 进行 归 一 化 处 理 。 
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数据 处 理 结束 后 ， 接 下 素 利 用 这 些 数据 创建 一 个 GRNN 网 络 间 进行 训 统 与 副 试 。 由 于 
训练 樟 本 呼 1995 一 2001 年 的 数据 ， 测 斌 数据 是 2002 一 2003 年 的 数据 ;， 此 外 ， 由 于 光滑 因 
子 对 网 络 的 性 能 影响 比较 大 , 因此 ， 希 要 不 断 迷 试 才 可 能 蓝 得 最 佳 值 , MATLAB 代码 如 下 : 





在 上 述 代 码 中 可 以 看 出 ， 町 光 请 因子 分 别 设 置 为 0.1.02…,05， 经 过 对 输出 结果 的 检 
查 改 现 ， 光 滑 因 子 越 小 ， 网 络 对 样本 的 到 近 性 能 就 越 强 ， 光 滑 因 子 越 太 ， 网 络 对 样本 数据 
的 盘 近 过 程 就 越 平 带 ,网络 对 训练 样本 的 通 近 误差 如 图 9 .14 所 示 ; 网 络 的 瑚 测 误差 如 图 9%.15 
所 示 ， 由 图 可 见 ， 当 光 锥 因子 为 QI 时 ， 无 论 是 通 近 性 作 还 是 预测 性 能 ， 误 差 帮 比 较 小 ， 
随 着 光 靖 因子 的 增加 ， 误 整 也 在 不 断 增长 ， 
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图 9-15 网 络 的 项 届 误 些 
从 误差 的 角度 考虑 ， 这 里 的 光 勿 因子 取 凡 1， 此 时 网 络 的 测试 输出 为 ; 








经 过 反 归 一 化 处 理 后 ， 寞 际 结果 为 : 


由 此 可 见 ， 网络 的 预测 误差 比较 去 ,这 是 因为 2002 一 2003 年 问 的 数据 较 前 几 年 的 增加 
幅度 丝 较 大 ， 而 且 这 些 数 据 同 训 扰 数 据 之 问 的 距离 也 比较 远 ， 外 推 起 来 有 一 定 的 难度 。 此 
外 ， 由 于 训 几 样本 容量 比较 小 ， 所 以 预 铀 精度 不 是 入 高 。 考 虑 到 这 些 因 素 ， 这 里 的 预测 结 
累 还 是 可 以 接受 的 。 


1 
9.6.3 ， 结 论 与 分 析 


本 例 在 分 析 了 和 寓 运 量 的 影响 因素 和 预测 特点 的 基础 上 , 利用 GRNN 神经 同 络 进行 了 货 
运 量 预测 。 色 过 预 副 将 果 的 梳 验 和 从 本， 证 明了 GRNN 神色 赐 络 在 货运 量 预 开 中 应 用 是 有 
辫 的 ， 而 且 ， 就 具体 网 绍 训 蝶 而 言 ， 与 BP 神经 网 络 相 比 ， 直 于 需要 调 吾 的 参数 比较 少 ， 
只 有 一 个 光滑 因子 ， 因此 可 以 更 快 地 找到 人 适 的 预测 网 络 ， 具 有 较 大 的 计算 优势， 

本 实例 的 完 MATLAB 代码 为: 
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股票 市 场 内 有 高 收益 和 高 风险 莽 存 的 牧 性 。 革 于 股市 苍 析 和 预测 的 研究 一 直 被 人 们 所 
重视 ， 但 是 由 于 股票 市 场 的 高 度 非 线性 特征 ， 导 至 众多 股市 分 析 广 法 的 应 用 效果 都 难 如 人 
意 。 近 年来， 计算 机 技术 和 人 工 智能 技术 的 迅猛 发 展 ， 为 般 票 市 场 的 建 模 和 预 副 提 供 了 新 
的 技术 和 方法 。 

神经 网 阁 因为 其 广泛 的 适应 能 力 和 学 习 能 力 ， 在 非 线 性 系 毁 的 预测 方面 得 到 了 三 衣 的 
应 用 。RBF 网 络 是 一 种 新 颖 有 效 的 前 向 型 神经 网 络 ， 由 于 该 网 赂 输出 层 是 对 中 间 层 的 线性 
加 权 ， 使 得 该 网 络 过 免 了 像 BP 网 将 那样 繁 再 元 长 的 计算 ， 具 有 较 高 的 运算 速度 和 外 排 能 
力 ， 同 时 使 得 网 络 有 较 强 的 非 线 性 醚 射 功能 。RBE 网 络 是 通过 非 线性 基 函 数 的 线性 组 合 实 
现 从 输 六 室 间 局 到 输出 室 间 到 的 非 线性 转换 。 而 乳 票 数据 是 一 类 非 线性 较 强 的 时 间 序 列 ， 
对 它们 进行 预测 ， 即 从 前 下 个 数据 中 预 届 和 将 来 的 寻 不 数 据 ， 实 质 上 就 是 按 出 从 尽 到 大” 
的 非 线性 蜀 射 关系 ， 国 此 ， 可 以 说 径 向 蕉 网 络 特别 适 台 于 非 线性 时 间 序 列 如 股票 市 场 等 系 
绕 的 预 抽 。 


3 了 1L 股市 概述 


由 于 股市 申 的 数据 可 以 看 做 一 个 时 间 序 列 进行 处 再， 因此 这 里 作 定 有 时 间 序 列 
= 全 全 EER， IE=12，… 下 ， 现 在 希望 通过 序列 的 前 N 个 时 刻 的 值 ， 预 简 出 后 W 个 


时 刻 的 值 。 这 里 可 以 采用 序列 的 前 个 时 刻 的 数据 为 滑动 窗 ， 并 将 其 映射 为 Wf 个 值 。 这 M 
个 值 代表 在 该 窗 之 后 的 W 个 时 刻 上 的 预测 值 。 如 表 外 10 所 示 ， 列 出 了 数据 的 一 种 划分 广 
法 。 该 胡 拒 数据 分 为 碟 个 长 度 为 NeM 的 。 有 一 定 重 登 的 数据 段 ， 王 一 个 数据 恨 可 以 看 做 
一 个 样本 这 样 就 可 得 到 KeL = (NM)+1 个 样本 ， 这 样 一 率 ， 萄 可 以 将 每 个 样本 的 前 N 个 
值 作为 RBF 神经 网 络 的 输入 ， 后 jy 个 值 作为 目标 输出 。 通 过 学 习 ， 实 现 从 入 到 输出 空间 
本 的 睐 射 ， 从 而 达到 时 间 序列 孩 钢 的 目的 。 


， 归 本 而 本 二 而 机 
JI 辣 对 本 PSNMATLAB3Aw 
囊 生 你 数据 的 划分 方法 


" 具 ， = 本 本 j 号 | 
3 人 






这 里 的 样本 数据 来 源 于 某 公司 的 股票 市 场 资料 ， 访 股票 数据 失 有 402 个 ， 即 时 间 序 列 
的 长 度 L=402。 出 于 箱 幅 所 限 的 原因 ， 这 里 无 法 将 所 有 的 数据 同时 列 出 ， 值 得 指出 的 是 ， 
无 论 采 用 大 的 学 习 样 率 ， 网 络 的 设计 和 训练 过 程 是 一 致 的 。 惟 一 不 同 的 是 ， 通 过 大 罕 量 
尾村 训练 出 来 的 网 络 其 预报 误差 更 小 ， 外 抢 能 方 也 更 强 。 夫 实例 的 主要 目的 是 疯 示 基于 神 
经 网 络 预测 股票 市 场 的 过 程 ， 因 此 , 这 里 节 移 了 所 有 数据 中 的 10 个 数据 作为 环 例 的 股票 数 
据 ， 如 表 9-11 所 示 。 与 前 面 的 各 实例 一 样 , 在 学 习 之 前 首先 要 对 这 些 数据 进行 归 一 化 处 理 。 
吉 包 11 申 的 数据 是 已 凤 归 一 化 后 的 监 据 。 
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9.72 网 络 训练 与 油 试 


这 里 特 每 3 天 作为 一 个 周期 ，3 天 的 股票 数据 作 轴 网 络 的 输 六 向 量 。 输 出 则 为 预测 日 
当天 的 股票 俐 格 。 因 此 ， 和 输入 层 的 神经 元 个 数 We=3， 辆 出 屋 的 掉 经 元 个 数 WE=1， 样 本 个 蚊 
FE-TUHHANHIsT7 个 ,为 了 提高 交 络 精度 ， 中 间 层 的 神经 元 个 数 设 定 为 色 个 ， 同 络 创 建 代 
三 为 ; 







其 中 ，spread 为 慑 向 基 函 数 的 分 布 密度 ，spiead 越 大 ， 网 络 的 书 铀 性 能 越 平 情 。 但 是 
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养 不 是 趟 大 越 好 ， 过 大 的 spread 可 能 导致 计算 上 出 现 问 题 ， 这 里 先 将 其 设 定 为 1。P 和 工 
分 别 表示 训练 样本 中 的 输入 向 量 和 目标 向 量 。newrbe 可 以 创建 一 个 准确 的 RBF 网 阁 , 也 可 
是 说 ， 网 络 的 创建 过 程 也 就 是 调 练 过 程 ， 所 创建 网 络 的 训 整 已 经 为 0 了。 

这 里 将 前 5 个 样本 作为 训练 样本 ， 后 2 个 样本 作为 测试 样本 。 测 试 代码 为 ， 


P_lest 为 测试 样本 向 量 ， 不 断 增加 spread 的 值 ， 观 附 它 对 最 些 输 出 的 有 影响， 结果 如 表 
912 所 于 。 可 见 ，spPread 越 大 ， 网 络 的 输出 就 越 接近 于 真实 值 。 但 当 spread 增加 到 5 后 ， 
对 输出 的 影响 就 没有 那么 明 显 了 。 固 此， 这 里 取 spreadas， 这 时 的 福 测 误 盖 为 00948， 考 
虚 到 训练 样本 的 客 量 ， 这 样 的 误 芭 还 是 可 以 接受 的 。 


惠 和 13 测试 结果 





这 于 的 训 续 样 末 容量 未 小 ， 导 坛 了 阅 结 的 预报 误 基 过 大 如 果 翅 装 得 更 好 
的 预测 性 能 ， 建 议 果 用 更 大 客 量 的 训 妹 样 未 ， 如 1 年 其 择 几 年 的 股票 喜 据 。 


本 例 完 整 的 柜 码 为 ， 














9.8 财务 失败 预测 的 MATLAB 实现 


耐 务 失败 又 称 财务 困境 ， 最 严重 的 财务 困境 就 是 企业 破产 。 当 一 个 企业 无 能 力 履 行 洁 
同 、 技 时 支付 倩 权 人 利息 和 偿还 本 爹 时 ， 读 企业 就 面临 财务 失败 。 事实 上 ， 全 业 陷 入 财 务 
转 纺 直 圣 破产 是 一 个 逐步 的 过 程 , 大 过 数 企 业 的 财务 和 朱 败 帮 是 由 财务 状况 异常 到 逐步 恶化 ， 
最 皖 导 黎 财 荔 先 败 或 琶 产 的 。 因 此 ， 企 业 的 财 淄 失 欧 不 但 具有 上 先 克 ， 而 且 是 可 预测 的 。 随 
着 中 国 加 入 WTO, 金融 银行 业 的 竞争 日 趋 激烈 ， 正 确 地 预测 企业 财务 失败 对 于 保护 投资 者 
和 傅 权 人 前 权益、 对 于 痉 营 者 防范 财务 范 机 ， 对 于 政府 管理 部 门 监 控 上 市 公司 质量 和 证 辩 
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市 场 风 险 ， 部 具有 重要 的 现实 意义 。 当前 被 广泛 研究 并 应 用 于 财务 失败 预 届 的 模型 主要 有 
统计 模型 和 人 工 条 能 模型 两 大 类 。 

传统 的 统计 模型 包括 多 元 判别 分 析 模 型 MDA 和 对 数 回 归 异 型 Logistics Regression 等 ， 
这 两 者 也 是 应 用 最 为 广泛 的 模型 。 统 计 模 型 最 大 的 优点 在 于 其 具有 明显 的 解释 性 ， 存 在 的 
缺陷 在 于 其 过 于 严格 的 前 提 和 条件 。 如 MDA 要 求 数 据 分 布 服从 多 元 正 态 分 布 、 同 协 方差 等 ; 
对 数 回 归 模 型 虽然 对 数据 分 布 的 要 求 有 所 降低 ， 但 仍 对 财务 指标 之 间 的 多 重 共 线性 干扰 禾 
感 ， 而 现实 中 大 量 数据 分 布 都 不 符合 这 些 假 设 前 提 ， 从 而 限制 了 统计 模型 在 这 一 领域 中 的 
应 用 。 


9.8.1 ”问题 杠 述 


随 着 信息 技术 的 发 展 ， 人 工 智 能 和 机 器 学 习 的 一 些 分 类 和 预测 的 算法 也 被 引入 到 金融 
信用 风险 评估 领域 中 来 ， 主 要 包括 人 工 神 经 网 络 和 决策 树 的 方法 。 决 策 树 是 一 种 自 项 向 下 
的 分 类 方法 ， 它 通过 对 一 组 训练 样本 的 学 习 ， 构 造 出 决策 型 的 邱 识 表现 。 决 策 树 具有 速度 
快 、 精 度 高 、 生 成 模式 简单 等 优点 ， 但 是 这 种 归纳 学 习 的 方法 容易 造成 模型 的 过 度 拟 合 ， 
而 且 当 问题 复杂 时 ， 决 策 树 的 解释 性 也 会 降低 。 人 工 神经 网 络 具 有 良好 的 容错 性 、 自 适应 
性 和 很 强 的 泛 化 功能 。 现 实 世 界 中 的 企业 财务 失败 预测 问题 往往 非常 复杂 ， 企 业 的 各 项 财 
务 指标 之 间 相 互 影 响 ， 呈 现 出 复杂 的 非 线 性 关系 ， 而 神经 网 络 正 是 处 理 这 类 非 线性 问题 的 
强 有 力 的 工具 ， 近 年 来 开始 被 引入 到 金融 信用 风险 评估 领域 中 。 尤 其 是 基于 神经 网 络 的 企 
业 破 产 预 测 方法 逐渐 显示 出 它 的 优越 性 ， 已 经 开始 成 为 新 的 研究 热点 ， 应 用 的 模型 也 从 主 
要 以 BP 网 络 为 主 逐 渐 扩 展 到 其 他 类 型 的 网 络 ， 本 例 尝 试 利用 以 竞争 神经 网 络 为 基础 的 学 
习 矢 量 量化 LYQ 网 络 ， 基 于 中 国 上 市 公司 真实 数据 对 财务 失败 进行 预 负 。 


982， 样 本 的 收集 和 处 理 


本 例 采 用 的 用 于 检 建 破产 预测 模型 的 财务 数据 全 部 来 自 于 国内 上 市 公司 的 真实 数据 ， 
其 中 选取 的 破产 公司 是 指 在 连续 两 年 内 被 股市 特别 处 理 〈ST) 的 公司 ， 同 时 依据 行业 分 类 
选取 该 行业 的 其 他 公司 为 正常 公司 ， 以 财务 状况 异常 最 早 发 生日 为 基准 旦 ,选取 这 些 会 司 
在 基准 日 前 两 年 的 财务 报表 数据 。 共 选取 了 102 家 财务 状况 异常 公司 ，481 家 正常 公司 (不 
同年 份 的 同一 家 公司 也 认为 是 不 同 的 公司 ), 共 $83 家 公司 来 构建 样本 集合 。 出 于 篇 幅 限 制 
的 原因 ， 这 里 选用 了 其 中 的 8 个 非 ST 公司 和 6 个 ST 公司 的 样本 。 

这 里 把 所 有 样本 数据 分 成 两 份 ， 分 别 是 训练 集 和 测试 集 。 已 有 研究 表明 ， 在 分 类 模型 
的 建立 过 程 中 , 如 果 训 练 集合 中 两 类 样本 数据 的 数量 相当 , 则 所 建 模型 具有 较 强 的 健壮 性 ， 
因此 这 里 的 训练 集 由 相同 数量 的 两 类 样本 构成 (ST 和 非 ST 公司 分 别 是 5 个 样本 )。 测 试 集 
中 ST 和 非 ST 公司 样本 分 别 是 1 和 3 个 ， 用 于 测试 在 训练 集 上 构建 的 LVQ 网 络 模型 的 预 
调 精 度 。 

特征 选择 是 模式 识别 分 类 问题 中 的 关键 步骤 ， 综 合 考 虑 覆盖 面 和 计算 量 等 问题 ， 这 里 
选择 了 最 能 反映 公司 财务 状况 的 财务 比率 指标 的 $ 个 财务 指标 : 净 资 产 收益 率 、 流 动 比率 、 
股本 权益 比率 、 总 资产 增长 率 和 营运 资本 率 。 样 本 数据 如 表 9-13 所 示 。 
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由 于 所 有 的 数据 都 已 经 位 于 医 间 10.1] 中 了 ， 所 以 对 于 雪 和 13 中 的 数据 ， 无需 进 行 归 一 
化 姓 理 就 可 以 直接 投 六 训 蝶 及 测试 。 

这 里 利 围 曾 $ 站 8T 公司 的 样本 和 前 于 小 正常 合 司 的 梯 率 作 汶 网络 的 训练 样 楷 ， 司 1 
个 有 T 公司 和 后 当 个 正常 盆 司 的 样本 作为 网 纸 的 测试 样 末 ， 

首 竹 ， 倒 建 一 个 VO 网站 ， 


甚 中， 已 为 训练 样 二 中 的 输入 向 量 ，B 表示 网 络 的 竞争 屋 神经 元 的 数目 ， 吕 3 05] 表 示 
输入 样本 中 属于 第 一 类 的 数据 点 50 名， 属于 另 一 类 的 占 和 个， 学 习 算 法 为 leamlv1。 由 于 
竟 争 层 神 经 元 的 数目 可 以 影响 网 阁 分 类 性 能 ， 因 此 需要 通过 不 断 实验 进行 网 择 。 

接 下 素 利 用 训练 样本 对 网 络 进行 训 练 ， 





其 中 ,ie 为 输入 向 量 所 属 的 类 别 ，ST 公司 用 1 表示 ， 正 常 公司 用 2 表示。 函数 indzvec 
类 别 向 量 转换 为 网 络 


可 用 的 目标 向 量 。 网络 的 训练 结果 为 ; 





网络 经 过 两 网 训练 后 ， 误 差 就 达到 了 要 求 。 训 练 蛙 果 如 图 中 16 所 示 。 
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于 Eee 


本 
围 导 二， 训 练 娃 时 【竞争 属 单元 ， 让 个 ) 
”对 网 些 进 行 仿真 ， 术 骆 网 络 是 否 对 训练 数据 中 的 输入 向 二 进行 了 正确 的 分 类 。 







输出 早 果 为 : 











妈 sis， 可 见 网 络 的 分 类 是 正确 的 。 
接 下 来 对 网 络 进行 变 叉 检验 ， 色 利用 网 络 对 训练 样本 以 外 的 数据 进行 分 类 ， 


ye_iest=tc_test， 可 见 网络 对 输入 向 量 进 行 了 威 功 分 类 。 
9.9 农作物 虫 情 预测 的 MATLAB 实现 


家 作物 的 主要 害虫 常年 对 作物 造成 严重 危害 ， 使 农业 经 济 遭 受 严重 损失 。 根 据 害虫 的 
发 生 。 发 展 规律 ， 以 及 作物 的 物候 和 气象 预报 等 资料 ， 进 行 全 面 分 析 ， 做 出 其 未 来 的 监生 
期 、 凝 生 量 和 和 苍 害 程度 等 估计 ， 预 弄 害虫 的 未 来 发 展 动态 ， 这 项 工作 就 叫做 农作物 虫 情 预 
测 。 虫 情 预测 工作 是 进行 害虫 绒 合 防 治 的 必要 前 握 ， 只 有 对 害虫 发 生 估 害 的 预测 做 得 及 时 
准确 ， 才 可 以 正确 地 氢 定 综 人 台 防 和 治 计划 ， 政 时 采取 必要 的 措施 ， 经 济 有 效 地 压 上 害 虫 的 发 
生 数 量 ， 避 证 农作物 的 商 产 和 入 产 。 

扶 照 预测 内 容 来 划分 ， 息 情 预测 可 以 分 为 发 生 期 预测 、 发 生 量 预测 、 迁 飞 赤 虫 需 测 和 
灾害 程度 预 而 ， 以 及 损 先 估计 等 4 种 ， 接 晤 预 币 时 间 长 短 划 分 ， 可 以 分 为 短期 预 简 ， 中 期 
碳 铀 和 长 期 预 铀 等 3 种 。 


和 ne] 








较 早 ， 目 前 主要 采用 以 下 3 种 方法 ; 

(1) 统计 法 。 根 据 多 年 的 积累 资料 ， 探 讨 革 种 因素 ， 如 气候 因素 和 物候 现象 等 ， 与 和 
里 某 一 虫 态 的 发 生 期 和 发 生 景 之 间 的 关系 ， 或 害虫 种 群 本 身 前 后 不 同 的 发 生 期 和 发 生 量 之 
间 的 相关 关系 ， 进 行 相关 回归 分 析 或 数理 统计 计算 ， 构 建 各 种 不 同 的 预测 模型 。 

(2) 实验 法 。 应 用 生物 学 方法 ， 主 要 求 出 各 虫 态 的 发 育 速率 和 有 效 积温 ， 然 后 应 用 气 
象 资料 预测 其 发 生 期 。 另 一 方面 ， 利 用 实验 方法 探讨 营养 、 气 候 和 大政 等 因素 对 害虫 生存 
和 繁殖 能 力 的 影响 ， 为 害 果 发 生 量 的 预测 提供 依据 。 

(3) 观察 法 。 直 接 观 察 害 虫 的 发 生 和 作物 物候 的 变化 ， 明 确 里 口 密度 、 生 活 史 与 作物 
生育 期 的 关系 。 应 用 物候 现象 、 发 育 进程 、 颗 口 密度 和 虫 态 亡 期 等 观察 资料 进行 预 独 ， 是 
我 国 目 前 最 通用 的 预测 方法 。 该 方法 主要 可 以 预测 发 生 期 、 发 生 量 和 灾害 程度 。 


9.9.1 基于 神经 圆 络 的 虫 情 预测 原理 





众所周知 ， 虫 害 的 发 生 和 自然 因素 之 间 有 着 密切 的 联系 ， 它 同时 受气 温 、 日 般 和 降雨 
量 等 因素 的 影响 。 影 响 虫害 发 生 景 的 各 因子 之 间 存 在 复杂 的 相互 作用 。 由 于 自身 的 缺点 ， 
利用 传统 方法 很 难 建立 起 一 个 精确 和 完善 的 预测 模型 。 而 BP 神经 网 络 具 有 对 非 线性 复杂 
系统 鼎 测 的 良好 特性 ， 可 以 有 效 地 描述 其 本 身 具 有 的 不 确定 、 多 输入 等 复杂 的 非 线 性 特性 。 

从 影响 虫害 发 生 量 的 气候 周子 角度 来 说 ， 虫 害 发 生 量 主要 受 以 下 3 个 内 素 制约 : 

(1) 温度 。 基 虫 是 变温 动物 ， 体 瘟 基本 上 上 是 随 着 外 界 温 度 的 变化 而 变化 的 。 而 外 界 温 
度 的 变化 直接 影响 着 昆 代 谢 率 的 高 低 ， 从 而 直接 影响 昆虫 的 生长 发 育 、 繁 殖 和 生存 等 生 
命 活动 行为 。 昆 虫 对 外 界 温度 的 变化 适应 不 是 无 限 的 ， 而 基 有 一 定 的 适应 范围 。 每 种 昆虫 
都 有 一 定 的 温 虚 适 应 范围 ， 超 过 这 一 温度 范围 ， 昆 虫 的 繁殖 就 会 停止 甚至 死亡 。 了 解 每 种 
者 下 对 温度 的 适应 范围 ， 对 于 分 析 和 上 宦 测 害虫 的 发 生 期 和 发 生 量 有 着 入 要 意义 。 

(2) 湿度 和 降雨 。 湿 庆 和 降雨 可 以 直接 影响 昆虫 的 生长 发 育 和 生存 。 外 界 环境 的 湿度 
和 降雨 都 是 通过 影响 昆虫 体内 的 含水 量 而 产生 作用 的 。 所 以 ， 当 外 界 环境 的 影响 使 得 虫 体 
内 的 水 分 调节 失去 平衡 时 ， 便 可 引起 昆虫 生长 发 育 和 繁殖 等 方面 的 反常 表现 。 

(3) 光 。 对 于 屁 时 来 说 ， 光 并 不 是 一 种 生存 条 件 ， 介 外界 光 因 素 与 昆虫 的 趋 风 性 、 活 
动 行为 和 生活 方式 等 都 有 着 直接 或 间接 的 联系 。 

自然 界 中 的 各 个 气候 因素 是 相互 影响 、 综 合作 用 于 昆虫 的 。 在 进行 虫 情 预测 时 ， 不 能 
够 只 根据 某 … 项 单个 指标 ， 闪 是 要 注意 综合 作用 影响 。 




















9.9.2 BP 网 络 设计 





本 实例 的 也 测 对 象 是 我 国 晤 节 的 田间 水 和 万。 水 稻 晤 虫 是 水 称 的 重要 害 量 之 一 ， 尤 其 古 
二 化 旺 。 从 温度 上 说 ， 一 化 嵌 的 发 生发 展 和 温度 的 变化 关系 十 分 密切 ， 二 化 量 的 抗 低温 能 
力 较 强 ， 抗 高 温 能 力 较 弱 ， 适 家 温度 在 16 一 30 摄氏 度 之 间 ，35 度 以 上 的 高 温 就 容易 使 一 
化 蜡 死 亡 。 丛 降雨 量 角 度 讲 ， 一 方面 ， 大 量 的 降雨 会 导致 气温 下 降 ， 有 利于 二 化 蜡 的 生存 ; 
另 - - 户 面 ， 充 沛 的 降雨 会 淹 死 大 量 的 幼虫 。 因 此 ， 降 雨 对 一 化 蜡 的 影响 是 比较 复杂 的 ， 溪 
要 综合 考虑 。 
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了 种 各 问 多 天 这 纪 MATLAB :7xm 


BF 网 绑 的 输入 和 输出 屋 的 神 皮 元 监 目 ， 是 由 畏 和 和 输出 向 量 的 雁 获 确定 的 . 输 六 向 量 
的 包皮 也 就 是 感 响 困 蚕 的 沾 归 ， 这 里 妊 侣 考虑 了 及 哺 虫 情 的 各 种 因素 ， 远 取 了 平均 气 沉 ， 
最 低 气 刘 。 日 照 时 间 和 降雨 量 等 # 汗 因 素 ， 所 以 输入 层 的 神经 元 个 数 汶 4， 为 了 里 化 虫害 
的 等 缓 ， 这 里 特 更 害 澳 生 量 和 为 4 明 ， 目 标 输 也 模式 为 【看 昌 17 《各 自 革 人 50 0 和 
[ 工 让 让 看 5， 荔 别 对 应 工 禹 ,了 明 .3 绒 和 4 肯 。 因 此 ， 答 出 屋 村 经 元 的 个 监 也 为 4， 由 于 输 
出 向 量 的 元 素 为 由 1 值 ， 困 此 ， 辆 出 屋 神 侣 元 的 忧 遂 函 交 为 可 选用 号 型 对 袁 本 类 logsis 

实 契 表明 ， 著 音 层 败 目前 增 析 可 以 提高 BP 网 妾 的 非 线性 呐 射 能 力 ， 但 是 隐 音 屋 数 目 
盐 过 一 定 值 ， 同 纤 性 郁 反 而 台 降 佐 。 而 单 隐 层 的 .BE 网 疼 可 以 是 近 一 个 任意 的 连 娃 非 线性 
函 囊 。 国 此 ， 和 这 里 采用 单 隐 野 的 BP 网 络 ， 陷 音 尾 的 神 上 内 元 赴 数 直接 影响 着 网 阁 的 非 碾 性 
预测 人 性能。 这 里 杠 据 Kalmiagormov 定理 ， 讼 定 网 络 的 陷 言 屋 挤 皮 元 个 表 为 8， 按照 一 般 的 设 
计 原 则 ， 隐 音 大 术 色 元 的 传道 函数 为 & 型 正切 函 烙 tnsipe。 

同比 续 构 确定 后 ， 需 要 利用 样本 数据 通过 一 定 的 学 习 规 则 进行 衣 练 ， 担 商 同 阁 的 适应 
此 沪 。 学 习 速 翰 是 训练 过 程 的 重要 因子 ， 它 焉 定 蚂 一 次 稀 环 中 的 权 值 变化 量 。 在 一 般 情况 
下 ， 幅 疝 于 网 择 较 涉 的 学 习 可 率 保证 学 习 的 稿 定性， 这 里 权 学 习 速 率 为 0.05: 

杰 袍 倒 所 使 用 的 蜗 据 浮 访 地 区 的 田间 水 稻 内 1956 年 到 2003 年 间 的 纯 月 到 避 月 的 里 志 
长 后 程 度 及 相应 的 气 萌 数据 ， 本 来 应 该 各 1996 年 到 2002 年 之 闸 的 数据 作 汶 网络 的 学 习 调 
才 样 本 ，2003 年 的 监 据 作 坟 预 油 坪 本 ， 但 这 里 限于 篇 幅 原 因 ， 在 利用 神经 网 络 工具 箱 进行 
端 程 时 ， 只 利用 2000 一 2002 年 的 败 握 作为 名 练 翌 本 ，2003 年 的 数据 作为 预 油 梯 本 。 这 样 
做 的 直接 后 果 估 导 吾 同 阁 的 预 到 精度 下 降 ， 但 这 里 我 们 更 美 必 的 是 谊 示 利 用 神 坚 网络 工具 
精进 行 昌 情 预测 的 堂 过 程 。 样 本 瑶 据 如 惠 甩 14 所 示 。 


惠 中 14 入 一 sciaiasaeea 
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而 盏 到 
人 HT | 
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运行 以 上 代码 ， 可 以 得 到 网 络 的 训练 结果 为 ， 

本 -只 本 到 ML Epm 3 下 IN 9 en RE 生生 

闻 全 吕 2 了 

可 见 网 络 经 过 13 次 训 和 后 即 可 达到 误差 要 求 ， 结 果 如 图 外 17 所 示 。 
“网络 的 输出 结果 为 











上 有 舍 下 通 


可 
何 印 oahs 
图 人 17 训练 结果 


通过 与 实际 虫 情 相 比较 ， 可 得 到 网 络 的 预 笛 误 总 为 0.1690。 考 卉 到 样本 容量 比较 小 的 
原 国 ， 这 已 缀 是 可 以 接受 的 时 果 了 。 网 络 的 预报 误 兰 曲线 如 图 外 18 所 示 。 


而 可 至 = 


总 个， 


下 豆 二 日 如 


图 忆 i 两 络 的 允 各 误 站 曲 颖 


本 章 以 电力 负荷 预报 、 河 道 线 滩 演 变 预 测 、 地 起 预报 、 交 通 运输 能 力 预 测 、 股 市 预测 、 
财务 失败 预测 和 下 情 预测 等 ? 个 实例 为 对 象 ， 研 究 了 神经 网 络 及 神经 网 络 工具 箱 在 工业 系 
统 、 地 球 物理 、 经 济 领域 和 农业 工程 中 的 应 用 。 这 些 问题 有 一 个 共同 的 特点 ， 即 都 是 受 多 
个 影响 因素 共同 影响 ， 且 各 个 因素 之 间 有 着 比较 复杂 的 关系 ， 具 有 高 度 不 确定 的 非 线性 系 
统 ， 利 用 传统 的 预测 方法 有 着 诸多 限制 ， 而 采用 神经 网 络 方法 则 能 较 好 地 克服 这 些 限 负 ， 
自 现 精确 的 非 线 性 了 预 测 。 

为 了 进一步 提高 网 络 的 预测 精度 ， 需 要 从 以 下 几 个 方面 虞 开 研 究 : 

《1) 网 络 的 训练 过 程 是 从 给 定 的 样本 数据 中 归纳 出 输入 、 输 出 之 和 问 的 复杂 规律 ,为 了 
能 够 更 加 准确 地 对 系统 进行 预测 ， 样 本 数据 应 该 尽 可 能 准确 。 

2) 提高 网 络 预测 能 方 的 主要 途径 有 :， 1) 尽 可 能 增加 样本 的 涵盖 面 ， 2) 在 输入 中 尽 
可 能 地 包括 影响 输出 的 主要 因子，3) 确定 适当 的 收敛 误差 。 对 于 常用 的 BP 算法 ， 可 考虑 
采用 遗传 算法 、 小 波 分 析 和 径 向 基 函 数 做 进一步 的 深 入 研究 。 

(3) 针对 BP 算法 中 存在 的 收 人 误 速度 慢 、 易 陷入 局 部 最 小 值 的 问题 ， 可 采用 附加 动量 
法 和 自 适应 学 习 速 率 法 在 一 定 程 度 上 解决 这 些 问题 。 附 加 动量 法 是 在 BP 算法 的 基础 上 ， 
在 每 个 权 值 变化 上 加 上 一 项 正 洲 于 上 一 次 权 值 变化 量 的 值 ， 并 根据 BP 算法 来 产生 新 的 权 
值 变化 ， 利 用 附加 动量 法 可 能 会 避 开 某 些 局 部 最 小 值 。 自 适应 学 习 速 率 法 是 在 学 习 过 程 中 
不 断 修正 学 习 速 率 ， 和 有 利于 提高 学 习 效 率 ， 缩 短 学 习 时 间 ， 
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第 10 章 ”基于 神经 网 络 的 模糊 控制 


模糊 控制 器 自 1974 年 问世 以 来 ， 其 基本 设计 方法 一 直 没 有 大 的 变化 。 它 的 基本 设计 思 
想 就 是 借助 人 工 操作 的 经 验 ， 通 过 合成 关系 ， 把 输入 的 模糊 量 和 关系 矩阵 合成 ， 推 导出 控 
制 量 。 近 年 来 ， 随 着 神经 网 络 理论 的 迅速 发 展 ， 一 些 研究 人 员 尝 试 将 神经 网 络 引 入 到 模糊 
控制 器 中 ， 取 得 了 不 错 的 效果 ， 控 制 器 性 能 得 到 了 进一步 的 提高 。 可 以 说 ， 将 模糊 控制 和 
神经 网 络 两 者 结合 组 成 的 神经 网 络 模糊 控制 技术 是 控制 理论 研究 者 们 关注 的 焦点 之 一 ， 

本 章 的 主要 内 容 包括 ， 

者 ”基于 神经 网 络 的 模糊 控制 原理 

名 ”神经 横 糊 控制 器 的 MATLAB 实现 








10.1 引 言 


传统 的 模糊 控制 器 是 利用 模糊 逻辑 来 模仿 人 的 思维 ， 对 那些 非 线 性 时 变 的 复杂 系统 ， 
以 及 无 法 建立 数学 模型 的 系统 实现 控制 的 。 它 的 设计 过 程 为 定义 由 语言 变量 描述 的 模糊 子 
集 ， 获 取 榨 制 规则 ， 并 对 这 些 规 则 进行 模糊 化 和 去 模糊 化 。 模 糊 规则 的 品质 次 定 了 控制 系 
统 性 能 的 优 劣 。 在 传统 的 模糊 控制 系统 中 ， 控 制 规则 的 获取 完全 按照 设计 者 和 操作 人 员 的 
经 验 进 行 。 在 其 些 系统 中 ， 由 于 设计 者 和 操作 人 员 经 验 的 癌 限 性 ， 造 成 模糊 控制 器 的 设计 
无 法 保证 最 优 或 次 优 的 控制 性 能 。 而 神经 网 络 具 有 自学 习 药 能力， 通过 训练 来 学 习 给 定 的 
经 验 ， 并 由 此 生成 模糊 控制 规则 。 

将 神经 网 络 与 模糊 控制 相 结 合 ， 为 模糊 控制 器 提供 了 良好 的 学 习 功能 ， 并 自动 生成 模 
糊 控 制 规 则 。 通 过 神经 网 络 实现 的 模 类 控制 ， 对 于 知识 的 表达 并 不 是 通过 显 式 的 一 条 条 的 
规则 ， 而 是 掀 这 些 规则 隆 含 地 分 布 在 整个 网 络 之 中 。 在 控制 应 用 时 ， 不 必 进 行 复杂 的 规则 
搜索 和 推理 ， 只 需 通 过 高 速 并 行 的 分 布 计 算 就 可 产生 输出 结果 。 


10.2 ”神经 网 络 模糊 控制 的 结构 和 特征 


神经 网 络 模糊 控制 器 是 由 神经 网 络 和 模糊 控制 共同 组 成 的 混合 系统 ， 这 种 混合 系统 兼 
备 这 两 种 技术 的 优点 。 本 节 将 详细 介绍 该 系统 的 结构 及 特征 。 


10.2.1 “神经 网 络 模糊 控制 器 的 结构 


神经 网 络 模糊 控制 器 的 结构 一 般 让 3 种 组 合 形式 ， 如 图 10-1 所 术 。 这 3 种 组 合 形式 分 
别 对 应 神经 网 络 在 模糊 控制 的 3 种 作用 。 
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利用 神经 网 络 驱 动 模 糊 推理 ; 
杀 利用 神经 网络 记忆 模糊 控制 规则 ; 


鱼 。 利 用 神经 网 络 优化 模糊 控制 器 的 参数 。 
禾 据 -一 一 *| 神经 预 处 理 机 | 一 一 "| 模糊 馆 辑 控制 器 -一 “结果 


5 | 
数据 na 六 一 一 结果 

















Pr 





数据 一 一 *| 贷 师 运 辑 控制 器 | | 神经 分 类 器 “一 一 结 果 
玖 10-1 神经 网 络 与 模 籽 控 制 的 组 合 形 式 
如 图 10-2 所 示 ， 为 一 种 带 有 神经 网 络 的 模糊 控制 器 结构 框图 。 这 种 结构 是 利用 联想 记 
忆 神 经 网 络 来 记忆 模糊 控 制 规则 的 ， 














图 10-2 ”神经 模 精 控制 器 结构 框图 


这 种 模 灶 控 制 器 的 控制 规则 为 ， 如 果 本 Ai，dE=4， 那 么 [所 。 其 中 , 正和 是 为 下 
个 输入 变量 ， 如 误 莽 和 误差 变化 率 ， 分 别 对 应 神经 网 络 的 两 个 输入 结 点 ， 结 点 个 数 由 输入 
语言 变量 的 级 数 决 定 ，7 为 输出 变量 ， 如 校正 值 ， 对 应 着 神经 网 络 的 所 有 给 出 结 点 ， 和 输出 
结 目的 信 数 是 由 输出 语言 变量 的 级 数 决定 的 。 如 果 通 过 BP 学 习 算 法 训练 神经 网 络 ， 调 整 
网 络 的 权 值 ， 使 网 络 能 够 实现 样本 的 输入 /输出 的 对 应 映射 ， 那 么 这 种 多 层 神 经 网 络 还 庶 该 
有 隐 含 层 ， 隐 含 层 神 经 元 的 个 数 需 要 通过 反复 实验 确定 。 


10.2.2 ”神经 网 络 模糊 控制 器 的 特征 








以 BP 网 络 模糊 控制 器 为 例 ， 有 一 个 单 隐 层 的 多 层 前 饶 BP 网 络 ， 结 构 如 图 10-3 所 小 。 
设 开 =[ 和 so jos =D 为 网 络 第 上 个 输入 的 样本 , 则 第 个 隐 含 层 神 经 元 的 输出 zx 


可 表示 为 : 

















其 中 ，TWi 为 第 守 个 输入 经 元 利 第 了 个 隐 含 层 神经 元 之 间 的 连接 权 值 ， 儿 为 $ 型 函数 ， 定 


义 为 @(zj=VY(+e): 
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看 而 洒 本 下 | 盏 通 证 重耳 夯 部 


本 痢 石 拘 开国 下 邓 





二 二 
至 量 上 汶 局 画 子 可 


男 103 BE 交 线 结构 


为 了 调 练 网 络 ， 建 立 模 山 关系 ， 需 要 僧 友 数 值 样本 来 描述 输入 /输出 模糊 子 旧 .假定 有 
两 个 输 大 变量 4 和 有， 一 个 输 则 变量 已 ， 都 是 由 如 图 10-4 所 示 的 模 巾 子 集 来 定义 的 ， 宰 籽 
规则 血 雪 10-1 所 示 。 网 络 输入 空间 对 阵 于 变量 点 中， 祯 划分 为 亲 个 部 分 。 由 于 网 络 的 每 
个 草 元 都 对 应 着 输 六 变量 的 某 咎 模 巾 子 保 ， 因 此 ， 捍 个 输入 变量 都 有 了 个 输 六 单元 与 其 了 


站 模 币 子 旧 相对 应 ， 
f 
1 盯 症 看 是 原 西 加 于 
硬 
- 下 
凋 和 业 二 奋 此 


昌 二 吨 进 


图 10-4 慎 粒 于 壤 规 划 定 这 


囊 101 模 锰 炳 则 惠 
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间 族 的 输入 信和 导 格 式 为 





5 
上 


[人 (ae (as(ejaas(a] az 人) 人 (Bew (5) as 人 pb) 
网 络 的 每 一 个 输出 单元 者 对 应 着 输出 变量 空间 中 的 一 个 量化 值 。 因 此 ， 输 出 的 模糊 子 
集 就 可 用 量化 空间 上 的 隶属 函数 来 表示 。 输 出 信和 号 的 格式 为 
[ (cu, 几 (ce 机 (c- 六 局 (c。 )] 
变量 ec 的 论 域 分 为 13 档 ,， 即 {-6.-5…,5,6}。 根 据 上 述 定 义 ， 可 将 控制 规则 “ 若 A 是 PB 
且 中 是 PS， 则 CC 为 NM?” 的 输入 信和 号 表示 为 : 
[0,0,0,0,0,0.150,.0,0,0..0,0] 


其 中 ， 岂 (aj=1， 虑 本 (b)=1， 其 余 均 为 全 。 输出 信和 号 为 ; 
[0,0.5.10.5.0.0,0,0.0.0.150.0] 


其 中 ，Pwg(-5)=0.5， Ha (4)=1， Ht-3)=0.53， 其 余 均 为 0。 
由 此 可 见 ， 所 有 的 控制 规则 都 可 用 一 系 烈 的 输入 /输出 数字 信和 号 来 表示 。BP 算法 用 于 
网络 训练 ， 使 输入 信和 叶 对 应 于 目标 输出 值 。 因 此 ， 经 过 训练 的 网 络 就 相当 于 一 个 模糊 关系 


存储 器 。 
如 果 想 通过 训练 好 的 网 络 推导 出 其 他 结论 ， 只 要 把 输入 变量 的 实际 值 模 糊 化 后 再 和 输入 
网 络 ， 如 叶 2.5，b= - 0.5， 则 模糊 化 后 的 输入 信号 为 


「0,0,0,0,0.75,0.25,0,0.5,0.5,0,0,0,0] 





在 网 络 的 输出 层 就 会 得 到 一 个 输出 模糊 子 集 , 再 经 过 解 模糊 子 集 可 得 到 真实 的 输出 值 。 

经 过 训练 的 网 络 能 够 对 输入 训练 数据 准确 地 做 出 响应 。 由 于 网 络 信息 的 存储 结构 十 分 
巧妙 ， 因 此 ， 它 激发 若干 条 规则 的 响应 情况 是 很 难 准 确 描述 的 。 一 般 来 说 ， 网 络 的 推理 机 
构 受 以 下 因素 的 影 啊 : 

(1) 一 般 规 律 。 如 果 输 入 模糊 子 集 接近 于 网 络 所 用 的 训练 模糊 子 集 ， 则 和 输出 几乎 和 该 


条 训练 规则 的 结果 相同 。 

(2) 非 线性 插值 规律 。 当 输入 信号 和 训练 用 的 模糊 子 集 有 较 大 差异 时 ， 输 入 后 就 有 一 
系列 的 相关 结 点 被 激发 ， 答 出 量 就 是 这 些 被 激发 规则 的 非 线性 插值 。 一 条 规则 的 输出 响应 
和 当前 输入 与 训练 该 规则 时 所 用 输入 的 距离 成 反比 。 


10.2.3 “神经 网 络 模糊 控制 器 的 应 用 实例 


下 面 通 过 介绍 一 个 采用 神经 网 络 的 自 组 织 模糊 控制 器 对 神经 网 络 模糊 控制 器 进行 演 
示 。 自 组 织 模糊 控制 器 〔EFuzzy Logic Self_ofganizing controller，FLSOC ) 的 系统 结构 如 图 


10-5 所 示 。 
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图 10-5 FLSOC 系统 结构 


FLSOC 通常 包括 以 下 用 个 部 分 ， 

者 ”一 个 基于 模 籽 规 则 推理 算法 模糊 控制 器 ; 

雪 ”用 于 对 控制 自身 作用 进行 评估 的 性 能 测量 部 分 ; 

龟 。” 一 个 增 量 处 理 模 型 ， 用 于 修改 模型 控制 器 中 的 规则 ， 以 对 控制 作用 给 出 增补 。 

基于 神经 网 络 的 自 组 织 模糊 控制 器 〈NNSOC) 的 系统 结构 如 图 10-6 所 示 。 其 控制 规 
则 通过 一 -个 神经 网 络 执行 ,而 规则 修正 则 由 BP 学 习 算法 实现 。 组 成 NNSOc 中 的 性 能 测量 
和 处 理 模 型 部 分 与 FLSOC 中 的 类 似 ， 下 面 仅 介 绍 其 不 同 之 处 。 


刁 
性 能 测量 广 * 站 


1 城下 字 
LM |Cy| 恋 控 对 条 


图 10-6 NNSOC 系统 结构 






























1. 控制 器 

FLSOC 中 采用 的 模糊 控制 器 是 由 一 组 模糊 规则 和 基于 模糊 推理 合成 算法 的 推理 机 组 
成 的 。 而 NNSOC 中 的 控制 器 是 由 神经 网 络 实现 的 ， 其 输入 编码 格式 和 上 小 节 所 述 相同 ， 
网 络 输出 代表 了 一 -个 真实 的 控制 量 ， 而 不 是 一 个 模糊 子 集 ， 因 此 无 需 了 解 模糊 的 过 程 。 在 
FLSOC 中 ， 采 用 比例 因子 玉 ， 天 。 和 大 ,的 目的 是 使 输入 / 输 由 景 的 变化 范围 折算 到 相应 模 
糊 子 集 的 定义 领域 上 。 因 此 ， 网 络 的 输出 we 始终 位 于 区 间 [0.1j 中 ， 并 与 控制 对 象 的 输入 之 
闻 为 线性 关系 。 

2 控制 诺 自 校正 

在 FLSOC 中 ， 替 则 修正 过 程 为 ， 

(1)》 确定 造成 当前 不 良 结果 的 控制 行为 。 

(2》 确定 该 控制 行为 产生 于 哪 一 条 规则 。 

(3) 由 输出 偏 移 计 算 输 入 增补 量 。 

(4》 修 正 相 应 规则 ， 以 使 得 在 类 似 情 况 时 增强 控制 作用 。 

对 于 FLSOC 来 说 ， 规 则 修改 可 以 是 修改 关系 矩阵 ， 也 可 以 是 修改 相应 规则 。 对 于 前 者 
来 说 ， 由 于 关系 虐 阵 通常 容量 很 大 ， 对 它 进行 搜索 与 修改 需要 很 多 时 间 。 对 于 后 者 来 说 ， 
通常 是 由 生成 的 新 规则 蔡 代 原来 规则 。 但 往往 由 于 每 条 有 旧 规 则 的 修改 会 由 多 于 1 条 ， 甚 至 
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二 





RS ; 要 
是 3 条 新 规则 所 替代 ， 这 样 会 导致 规则 总 数 急 副 增多 。 随 着 控制 器 规则 煞 目 不 断 增 加 ， 用 
于 控制 行为 评估 的 计算 时 间 也 将 相 庶 增 加 。 

在 NNSGC 中 , 可 以 通过 调整 网 络 的 权 值 来 修正 控制 量 。 采用 BP 算法 进行 一 定 次 数 的 
反复 计算 ， 就 可 以 修正 网 络 的 权 值 而 收 到 期 望 效果 。NNSOC 的 学 习 过 程 具 有 以 下 优点 : 

(1) 它 既 不 需要 对 控制 的 输出 解 模 糊 ， 也 不 需要 对 输入 变量 模糊 化 。 

(2) 由 于 网 络 的 前 向 推算 时 间 是 固定 的 ， 因 此 ， 佑 算 控 制 行 为 的 时 间 也 将 不 变 。 

《3) 如 果 可 以 研制 出 具有 在 线 学 习 能 为 的 神经 网 络 芯片 ， 则 就 有 可 能 实现 控制 工程 的 
高 速 处 理 ， 很 大 程度 上 提高 实时 性 。 

在 NNSOC 形成 一 套 成 功 的 控制 策略 之 前 ， 需 要 进行 若干 次 训练 ， 每 次 训练 都 由 一 批 
预定 数量 的 采样 值 完 成 ， 权 值 的 修改 是 在 训练 过 程 中 的 每 个 采样 时 刻 进 行 的 。 修 正 后 的 权 
值 被 用 于 下 一 次 训练 ， 并 且 每 次 训练 前 均 应 该 对 控制 变量 初始 化 。 每 次 训练 使 系统 的 响应 
特性 《上 升 时 间 、 超 调 量 等 ) 逐渐 得 到 改善 。 不 断 地 重复 训练 ， 直 到 NNSOC 的 性 能 可 以 
接受 为 止 。 

在 给 定 的 采样 时 刻 ， 采 月 BP 算法 ， 其 反复 计算 的 次 数 取决 于 网 络 的 大 小 。 通 常 ， 大 
型 网 络 需要 更 多 的 学 习 次 数 。 但 是， 如 果 在 每 一 采样 时 刻 ， 计 算 的 次 数 太 多 ， 则 网 络 有 可 
能 会 忘记 以 前 学 习 过 的 内 容 。 可 见 ， 在 NNSOC 中 ， 计 算 次 数 的 选择 也 极为 重要 。 

例 10.1 假定 有 一 个 二 阶 系统 ， 状 态 方程 为 : 

芷 二 44 丰 十 再 4 (站 
1 











其 中 ， 开 =[x, 史 了 为 状态 变量 ，z ft) 为 外 界 输入 变量 ，y (站 为 输出 变量 ， 系 数 矩 阵 


4-|。 | 5-| .| c-|| 令 轩 = 一 1.$， 人 二 -3， 2 一 10， 目标 输出 为 
纪 rs 属 


s(D)=10 。 控 制 器 有 两 个 输入 变量 ， 分 别 为 误差 e(f)=s(f)- ?>() 和 误差 变化 这 


ec(ffj=de(r)y/di， 以 及 一 个 输出 变量 xf)。 变 量 EC 的 模糊 子 集 定义 如 图 10-7 所 示 。 为 了 
使 进行 目标 值 输出 时 的 控制 更 为 精确 ， 变 量 忆 增加 了 两 个 模糊 子 集 PZ 和 NZ。 


本 


mn mW NM ZE 要 站 ff PDB 





图 10.7 EC 的 模糊 子 集 定 多 
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_ _ 本 网 SR 站 中 
、 由 了 总 共 四 局 人 人 兴 
机 二 本 品 ， 本 呈 站 六 二 这 相 站 晤 
| 妈 由 


这 里 的 控制 器 采用 个 单 隐 层 的 BP 网 络 它 的 输入 层 有 15 个 神经 元 ， 其 中 前 8 个 代 











表 e 人 的 模糊 了 集 ， 后 7 个 代表 ec 人 的 模糊 子 集 。 隐 含 层 有 8 个 神经 元 ， 输 出 层 只 有 !1 个 
神经 元 。 这 里 取 态 =3， 民 .=30， 网 络 输出 zz 在 人 .之 间 取 值 ， 并 且 与 实际 控制 对 象 的 输入 
中 成 线性 关系 ， 由 于 此 处 站 位 于 区 间 [-1,1] 中 ， 所 以 二 2-1， 

假定 “天 一 1]” 时 刻 的 控制 作用 决定 了 控制 器 在 大 时 刻 的 输出 量 ， 在 采样 封 刻 天 修正 环 
节 的 输入 变化 量 为 nr 有 ， 并 日 “一 1” 时 刻 的 输入 信号 内 的 目标 设 定 为 风 天 TH 大， 这 
里 取 K=0.16 是 把 信号 rm 器 从 区 间 [-6,6] 折 算 到 [-1,1 上 的 一 个 比例 常数 。 为 了 得 到 期 望 值 ， 
在 每 一 个 采样 时 刻 利 用 BP 算法 计算 5 次 来 修正 网 络 权 值 。 

控制 器 的 学 习 过 程 要 通过 震 干 次 训练 ， 每 次 训练 采用 400 个 样本 数据 ， 训 练 前 要 对 控 
制 变 量 初始 化 ， 学 习 训 练 一 定 要 持续 到 获得 满意 的 输出 啊 应 为 止 。 通 过 选择 不 同 的 训练 次 
数 和 选择 和 不同 的 柬 的 值 ， 进 行 多 次 实验 ， 结 果 表 明 : 

1) 网 络 的 训练 次 数 越 多 ， 控 制 器 的 输出 越 稳定 。 

(2) 同样 结构 的 控制 器 , 可 适用 于 许多 不 同 的 被 控 对 象 , 仅仅 响应 特性 有 所 不 同 而 已 。 

3) 当 比 例 因 子 的 变化 范围 很 大 时 ， 也 不 会 影响 到 该 控制 器 的 自给 织 件 能 。 因 此 ， 该 
控制 器 具有 很 强 的 适用 性 。 


10.3 基于 MATLAB 的 神经 模糊 控制 洗衣 机 仿真 


20 世纪 90 年 代 初 期 ， 日 本 松下 公司 推出 了 神经 模糊 控制 全 自动 洗衣 机 。 这 种 洗衣 机 
能 够 自动 判断 友 物 的 质地 软 使 程度 、 衣 量 多 少 、 航 污 程度 和 性 质 等 ， 应 用 神经 模糊 控制 技 
术 ， 自 动 生成 模糊 控制 规则 和 隶属 度 函 数 ， 项 设 尝 衣 水 位 、 水 流 强度 和 洗涤 时 间 ， 在 整个 
洗衣 过 程 中 实时 调整 这 些 参 数 ， 达 到 最 佳 的 洗衣 效 采 。 


10.3.1 ”洗衣 机 的 模糊 控制 


洗衣 机 的 主要 被 控 参 量 为 洗涤 时 间 和 水 流 强度 ， 而 影响 这 一 输出 参量 的 主要 因子 是 补 
洗 物 的 浑 独 程 度 和 浑浊 性 质 ， 后 者 可 用 浑浊 度 的 变化 率 来 描述 。 在 洗涤 过 程 中 ， 油 污 的 洗 
浊 度 变化 率 小 ， 泥 污 的 浑浊 度 变 化 率 大 。 因 此 ， 洗 浊 度 及 其 变化 率 可 以 作为 控制 系统 的 输 
入 参量 ， 而 洗涤 时 间 和 水 流 强度 可 作为 控制 量 ， 即 系统 的 输出 。 实 际 上 ， 洗 衣 过 程 中 的 这 
类 输入 和 输出 之 间 很 难 用 一 定 的 数学 模型 进行 措 述 。 系 统 运 行 过 程 中 具有 较 大 的 不 确定 性 ， 
控制 过 程 在 很 天 程度 上 依赖 操作 者 的 经 验 , 这 样 一 来 ,利用 常规 的 方法 进行 控制 难以 奏效 。 
但 是 ， 如 果 利 用 专家 知识 进行 控制 次 策 ， 往 往 容 易 实 现 优化 控制 ， 这 就 是 在 洗衣 机 中 引入 
模糊 控制 技术 的 主要 原因 之 ~。 

衫 据 上 述 的 模糊 控制 基本 原理 ， 可 得 出 确定 洗涤 时 间 的 模糊 推理 框图 如 图 10-8 所 示 。 
其 输入 量 为 洗涤 水 的 浑浊 度 及 其 变化 率 ， 全 考虑 到 适当 的 控制 忻 能 需要 
和 简化 程序 ， 定 义 输入 量 主 汪 度 的 世 交 亲生 入 全 于 和 ， 、 银 浊 )}， 定 义 浑 独 度 变换 率 
的 模糊 词 集 为 { 零 、 小 、 定义 输出 二 沉 末 | 辣 的 村 相信 为 [每 、 较 短 、 标 准 
长 ] 描述 御 入 / 答 山 灾 量 的 亲信 基 具有 模 交待 任 ， 可 以 用 模 关 信人 表示。 四 此， 模 交 概念 
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NS 和 nn 代 总 3 
ERRORSRORRRR 贡生 现 和 和 污 要 人: 黎 妍 区 ， 
的 确定 问题 就 直接 转化 为 求 取 模 糊 集 合 的 事 属 函数 问题 。 
浑浊 度 
举 少 时间 


浑 波 度 变化 率 模糊 控制 器 FC 





图 10-8 确定 洗涤 时 间 的 模糊 推理 框 司 


通常 定义 一 个 模糊 子 集 ， 实 际 上 就 是 确定 模 煌 子 集 隶 属 函 数 形 状 的 过 程 。 将 确定 的 隶 
属 困 数 曲线 离散 化 , 就 得 到 了 有 限 个 点 上 的 隶属 度 , 构成 了 一 个 相应 的 模糊 子 集 。 如 图 10-9 
所 示 ， 和 定义 的 隶属 函数 曲线 表示 论 域 x 中 元 素 关 对 模糊 变量 4 的 隶属 程度 。 设 定 该 旭 属 本 
数 的 论 域 x 为 : 
XI -6 -3 -下 -3 一 2 -1012.3.4.5.6) 
则 有 : 


ku 人 2)=As[O=02，1ut)=AG)=07， 同 人)=1 


HL 人 zx] 






凡 (2 





妆 了 十 厂 


图 10-9 模糊 变量 4 的 隶属 麻 邑 数 


论 域 x 中 除了 2.3,4,56 外 ， 各 点 的 隶属 度 均 为 0。 那 么 模糊 变量 4 的 模糊 子 集 为 
4=0.22+0.773+174+0,.775+0.210。 
通过 这 个 例子 可 以 看 出 ， 在 隶属 函数 的 曲线 确定 后 ， 就 可 以 很 容易 地 定义 出 一 个 模糊 
变量 的 模糊 子 集 。 洗 衣 机 模 粮 控制 的 输入 和 输出 变量 的 隶属 函数 如 图 10-10 所 示 ， 由 此 可 
以 相继 确定 它们 的 模 戎 子 集 。 


上 1 | 
0.5 由 5 自 , 5 
和 1] 23 4 5 6 0 0234 5 8 站 1 2 
笃 b ee 


图 10-10 ”洗衣 机 模糊 变量 素 属 函数 〈a 浑浊 度 , 疏 浑 水 度 变 化 率 ， 5 洗涤 时 间 间 
洗衣 机 的 模糊 控制 规则 可 以 归纳 16 条 ， 如 表 10-2 所 示 。 
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1 
表 10.3 选 衣 机 的 醒 糊 控制 检 则 表 





10.3.2 洗衣 机 的 神经 网 络 模 枯 控制 器 的 设计 


洗 去 机 模 瑚 控制 的 控制 部 分 框图 如 图 10-01 记 示 ， 模 糊 控 制 器 如 图 中 虚线 所 示 。 粮 项 
控制 的 过 程 是 这 样 的 ， 首 先 洗 胡 机 蓝 皮 的 浑 剖 度 信息 由 传感器 送 到 信息 处 理 单 元 ， 分 为 深 
神 记 和 评 吉 度 变 化 率 送 入 模糊 控制 器 ， 对 于 输入 的 梳 贿 量 ， 需 要 将 其 转换 成 异 幅 变量 ， 通 
过 单片机 ， 简 用 查 天 法 按照 模 贿 推理 法 则 做 出 琪 站 ， 结 果 被 认为 是 模糊 变量 ， 冯 过 去 模 栅 
此 站 元 条 理 ， 机 调 执行 中 机 二 售 环 拒 订 计 间 ， 这 样 就 完成 了 一 次 慎 帆 控制 算法 过 程 。 





图 ii 机 可 控 抽 的 控制 认 疗 框图 


一 般 的 模 帆 撞 市 洗 坊 机 逻 “专家 经 验 ” 通 过 模糊 兵制 谢 则 囊 体 现 出 康 ， 和 运行 中 通过 覃 
雪 八 出 控制 焉 笋 ， 这 比 需要 操作 者 设 定 程序 的 电脑 榨 制 洗 友 机 前 进 了 一 去 步 。 但是， 这 种 
泪 志 机 直 于 规则 甫 需要 占 肝 大量 的 内 存 室 间 ， 查 胡 反 庶 迪 度 慢 ， 只 能 拨 按 照 已 经 编 六 的 规 
市 进行 掩 制 ， 国 此 下 上 怠 理想 。 而 把 杆 即 网 络 和 模 灿 控制 相关 侣 ， 则 能 仍 般 决 这 些 问 题 。 

洗衣 册 的 神 公 网 阁 懂 刺 控 制 是 利用 离线 训 暴 好 的 网 终 ， 通 过 在 线 计 算 即 可 得 到 量 佳 输 
出 。 这 种 控制 模式 的 反应 速度 快 ， 而 且 神 经 网 络 又 具有 自学 习 功 能 和 联想 能 力 ， 对 于 未 在 
训练 市 出 现 的 梯 幸 ， 也 可 以 通过 联系 记忆 的 功能 ， 杖 出 皖 制 忠 策 ， 囊 现 非 民 灵 活 ， 

洗衣 机 的 神经 网 络 槛 精 控 制 骂 的 控制 系 线 中 音 有 事 个 神经 模糊 环节 ， 下 面 仅 介绍 以 深 
十 诬 和 和 浑 称 度 变 化 率 为 输 六 要 量 来 榴 定 洗 证 时 间 的 接 便 器 。 控 制 器 的 挤 制 框图 如 图 10-13 
所 示 ， 和 生生 秆 区 人 让 














入 大 尼 中 韶 屋 输 用 尾 


图 i0:193” 谭 过 度 乔 凤 网 赂 嫩 层 


神经 模 精 控制 器 在 输入 /输出 估量 的 选择 ， 以 及 模 炙 论 域 和 植 糊 子 集 的 确定 方面 ， 与 一 
悉 模 炳 控 制 路 负 有 什么 区 别 ， 只 是 在 排 理 手段 上 引入 了 神经 网 络 。 念 剖 ~ 十 为 输入 量 浑浊 度 
的 横山 子 集 ，m-~e 为 输入 量 浑浊 度 变化 率 的 模 精 子 集 ，7i-% 为 输出 控制 量 的 异类 子 摔 。 
从 模糊 控制 规则 表 10-2 可 以 看 出 ， 共 有 16 条 控制 规则 ， 每 条 规则 都 是 一 对 样本 ， 则 共有 
16 对 样本 。 例如 ， 当 将 神 度 为 “ 清 "， 评 训 度 变化 率 为 “ 零 ” 时 ， 许 兴 时 间 应 擅 为 “ 短 ”， 
这 个 样本 可 以 表示 为 


是 = 作 和 各 下 让 001.0.05 和 00.0] YE[1.0.05 二 00000] 


其 中 , #* 中 的 各 元 束 为 对 虚 的 隶属 函 败 ， 即 模 蝴 子 梨 的 咸 值 。 同 理 可 列 出 其 他 15 个 翌 
素 对 ， 并 将 它们 舍 歼 赣 和 神经 网 络 进行 元 乒 训 练 ， 当 训练 蛙 东 后 ， 和 神经 网 络 已 经 记忆 了 丁 
山 控 制 埋 则 ， 性 用 时 具有 联想 记忆 功能 ， 如 表 10-3 所 示 ， 为 伍 一 个 和 输 六 参量 的 槛 帆 量 。 


表 1I0.3 输入 参量 的 模 关 量 





_ 根 据 模糊 规 出 ， 可 得 到 网 络 的 训练 样本 和 工 。 完 整 的 MATLAB 代码 如 下 
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| 生 汕 上 





LI 本 
本 | = 画面 面 | 一 = 革 





二 全 各 必 丰 想 王 面 而 『 
ESMATLAB:7xm: 





网 络 的 误 闫 曲线 如 图 10-14 所 示 ， 由 图 可 见 ， 网 络 的 最 大 误差 不 超过 心 2， 说 明 网 络 性 
能 是 可 以 请 足 掉 制 要 求 的 。 


图 1044 较 刻 刘 吾 曲 谍 
网 些 到 过 旭 !1 雇 训 绒 后 ， 目 标 误 差 达 到 要 求 ， 结 果 如 图 10-15 所 示 。 


下 FEarninea 而 [DOOSESSE 3 il 总 加 1 
本 





图 10- 语 ” 调 栋 由 果 


10.4 小 结 


本 节 研 究 了 神经 网 阁 横 瑞 控制 的 原理 和 神经 模糊 控制 恬 的 设计 ， 并 以 神经 模糊 控制 尘 
衣 机 为 例 ， 读 示 了 和 神 到 网 络 在 模糊 控制 中 的 应 用 


EEC 





和 证 汪 和 和 RE 
总 的 说 来 ， 基于 神经 网 络 的 模 交 控 仙 具 有 以 下 畦 上 
(1) 可 以 直接 从 经 验 中 获取 知识 ， 白 动 建立 模 壮 规则 和 隶属 函数 。 
(2) 无 需 查 表 ， 节 省 内 存 空间 ， 只 需 通 过 在 线 计算 ， 便 可 得 到 控制 器 输出 。 
(3) 具有 较 强 的 适应 能 力 和 联想 能 力 ， 对 于 未 出 现 过 的 样本 ， 神 经 模糊 控制 器 可 通过 
记忆 ， 联 想 产 生 合适 的 输出 量 对 系统 进行 控制 。 
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第 11 章 ”基于 神经 网 络 的 目 运 应 
咯 声 抵消 技术 


本 章 通 过 太 量 的 范例 ， 全 面 介绍 求解 各 种 常见 优化 问题 的 标准 算法 ， 玉 其 在 MATLAB 
中 的 实现 技术 ， 帮 助 污 者 熟练 使 用 MATLAB 优化 工具 箱 来 解决 工程 实际 问题 。 

本 章 主要 内 容 包括 : 

和 自 送 应 嗓 声 抵消 实现 原理 

各” 嗓 声 抵消 系统 的 MATLAB 仿真 


11.1 引 言 





滤波 理论 与 技术 是 信和 号 处 理 的 主要 内 容 。 所 谓 滤波 ， 实 际 上 是 完成 从 输入 到 输出 的 某 
种 映射 关系 。 沥 波 的 种 类 很 多 ， 最 简单 的 滤波 器 是 权 系数 固定 的 线性 滤波 器 。 为 了 提高 滤 
波 性 能 ， 泪 波 器 的 权 系数 〈 传 递 函数 ) 往往 随 输 入 信和 号 而 发 生变 化 ， 这 种 滤波 称 为 自 适 应 
恋 波 CANC)， 如 果 泪 波 器 的 输入 /输出 关系 具有 非 线性 映射 特性 ， 那 么 对 应 的 滤波 称 为 非 
线性 滤波 。 自 适应 非 线性 滤波 是 当今 信号 处 理 的 又 一 重要 发 展 方向 ， 它 是 针对 线性 处 理 的 
许多 不 足 和 限制 而 发 展 起 来 的 ， 在 不 少 场合 ， 可 获得 比 线性 处 理 更 加 优越 的 性 能 ， 因 此 具 
有 广泛 的 应 肝 前 景 。 

对 于 ANC 系统 来 说 ， 其 基本 要 求 和 主要 特点 是 ,其 两 路 输入 噪声 必须 统计 相关 ,和 它们 
可 以 是 线性 相关 的 。 使 用 线性 相关 ANC 系统 的 自 适应 滤波 器 是 线性 滤波 器 , 在 这 种 情况 下 ， 
对 于 平衡 的 输入 噪声 ， 自 适应 滤波 器 的 稳 态 性 能 近似 于 维 纳 滤波 器 ， 但 是 当 两 路 输入 噪声 
间 是 非 线性 相关 时 , 使 用 线性 的 ANC 系统 就 遇 到 了 困难 。 如 果 线 性 自 适 应 算法 用 线性 变换 
逼近 非 线性 变换 ， 为 了 达到 足够 高 的 精 么 ,用 于 估计 的 权 系 数 向 量 的 维 数 将 会 爆炸 性 增长 ， 
自 适 庶 滤 波 器 的 估计 速度 必然 会 大 为 降低 ， 其 人 性 能 大 幅 下 降 ， 难 以 达到 实时 应 用 目的 。 这 
时 为 了 有 效 地 进行 噪声 抵消 ， 就 必须 采用 自 适应 的 非 线性 泵 统 做 滤波 器 。 为 了 克服 自 适应 
线性 泪 波 器 的 缺点 ， 人 们 研究 了 几 种 非 线 性 自 适应 滤波 器 ， 常 用 的 非 线性 滤波 形式 有 
Voltera 型 ， 虽 然 Volterra 滤波 器 可 以 完成 非 线 性 映射 ， 但 由 于 在 Volterra 展开 处 理 中 ， 参 
量 的 数目 随 展开 阶 数 指数 性 地 增加 ， 因 此 处 理 是 很 繁杂 、 图 难 的 。 

自 1986 年 开始 ， 神 经 网 络 随 着 反 向 传播 (BP) 算法 的 出 现 而 得 到 复兴 ， 此 后 神经 网 
络 的 研究 再 度 抓 起 高 潮 ， 由 于 神经 网 络 具 有 高 度 并 行 性 、 很 强 的 非 线 性 、 变 换 能 力 和 学 习 
能 力 ， 因 此 具有 巨大 的 应 用 潜力 ， 也 为 自 适应 非 线性 滤波 提供 了 一 种 全 新 的 思路 和 方法 。 

神经 网 络 是 模仿 和 延伸 人 脑 智能 、 思 维 、 意 识 等 功能 的 非 线性 自 适应 系统 ， 它 具有 全 
新 的 信息 表达 方式 、 高 度 平行 分 布 处 理 、 联 想 、 自 学 可 和 自 组 织 能 力 ， 以 及 极 强 的 非 线 性 




















vv II 
网 射 能 力 ， 这 为 它 提供 了 巨大 应 用 潜力 ， 也 为 自尊 应 非 线性 滤波 提供 了 一 种 全 新 方法 ， 激 
活 函 数 为 Sigmoid 的 多 层 前 向 神经 网 络 能 够 以 任意 精度 实现 非 线 任 函数 再 近 , 所 以 可 用 BP 
神经 网 络 组 成 非 线性 自 送 应 滤波 器 。 通 过 将 滤波 器 的 误差 信号 与 神经 网 络 中 能 重 函 数 对 应 
起 来 ， 可 实现 神经 网 络 自 适 应 小 波 器 。 


11.2 上 自 适应 噪声 抵消 实现 原理 


噪声 消除 是 信和 号 处 理 的 核心 问题 之 一 ， 通 常 实 现 最 优 滤 波 的 滤波 器 为 维 纳 滤波 器 与 卡 
尔 曼 沽 波 器 。 它 们 均 要 求 已 知 信号 和 噪声 的 先 验 知识 ， 但 在 许多 实际 应 用 中 往往 无 法 预先 
得 知 ， 为 此 发 展 了 各 适应 滤波 器 。1965 年 美国 斯 坦 福 大 学 建成 了 第 一 个 自 适 应 噪声 抵消 
(ANC) 系统 ， 随 着 计算 机 技术 与 集成 电路 技术 的 进步 ， 新 的 自 道 应 算法 不 断 涌 现 出 来 ， 
自 适应 噪声 抵消 在 理论 和 应 用 上 都 得 到 了 很 大 发 展 。 自 适应 噪声 抵消 技术 是 一 种 能 够 很 好 
地 消除 背景 噪声 影响 的 信号 处 理 技术 ， 应 十 自 适 应 噪声 抵消 技术 ， 可 在 未 知 外 界 于 挑 源 特 
征 、 传 递 途径 不 断 变化 ， 以 及 背景 噪声 和 被 测 对 象 声 波 相 似 的 情况 下 ， 能 够 有 效 地 消除 外 
界 声 源 的 干扰 获得 高 信 噪 比 的 对 象 信 叶 ， 这 一 技术 可 为 机 械 元 件 的 噪声 、 振 动 等 动态 信和 号 
在 测试 环境 不 太 理 想 的 工作 现场 做 测试 分 析 和 故障 诊断 时 ， 吉 供 有 效 的 方法 和 依据 ， 具 有 
一 定 的 理论 意义 和 应 用 价值 。 


11.2.1 自 适应 清 谈 器 


自 适 应 滤波 器 自从 20 世纪 60 年 代 出 现 后 ， 其 理论 在 不 断 地 发 展 与 完善 ， 应 用 也 越 来 
和 本 中 : 











1 下， 时 刻 的 输出 信号 什 ， 

看 六 一 一 表示 时刻 的 参考 信和 号 值 或 所 期 望 响 应 的 信号 值 ; 

ef 一 误差 信 号 ，e(PD=d0D-?O， 

自 送 应 数字 滤波 器 的 证 波 参数 受 误 差 信和 号 e( 力 的 控制 ， 根 据 e( 疙 值 而 自动 调整 ， 使 之 适 
侣 下 一 时 刻 的 输入 x+HD， 以 便 使 输出 w+HH 接 近 于 所 期 望 的 参考 信号 il 二 D。 





图 11-1 自 适 应 数字 小 波 器 原理 
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11.2.2 自 适 应 虽 声 抵 销 系统 基本 原 


自 适应 噪声 抵消 系统 除了 需要 原始 输入 外 ， 还 需要 一 个 参考 输入 ， 供 给 与 原始 输入 相 
关 的 噪声 ， 以 便 抵消 原始 输入 中 的 噪声 ， 而 对 其 中 的 有 用 信号 几乎 不 产生 什么 畸变 。 
忆 
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图 11-2 自 适 应 噪声 抵消 系统 


图 11-2 描述 的 是 一 典型 的 自 适应 噪声 抵消 系统 , 其 中 原始 输入 信号 吉 昌 是 有 用 信号 % 旭 
与 噪声 zx( 旭 之 和 ， 参 考 输入 信号 x 昌 是 与 zx 队 相 关 的 噪声 c 间 ， 假 设 x 间 、z 阳 与 c 昌 是 鹤 均 
值 的 平稳 哆 机 过 程 ，*( 间 与 z 昌 、c 旨 不 相关 ， 由 图 11-2 可 见 ， 自 适应 涉 波 器 的 输出 zo 介 
为 c( 扩 的 滤波 信号 ， 因 此， 自 适 应 噪声 抵消 系统 的 输出 X 间 为 : 


XRD = 3 十 Z 人 一 2ZD( 天 ) 


72( 了 一 82( 大 二 [zx 大) 一 zc( 丰 十 28([z(K) 一 ze 人 6] 


根据 前 面 不 相关 的 假定 ， 对 上 式 两 边 取 数 学 期 望 ， 可 得 ; 
E[y2( 扑 ] = ELs2 (ED)]+ 本 (z( 提 一 zo()] 


信和 号 功率 下 s2( 扣 ] 与 自 适应 滤波 器 的 调节 无 关 , 因此 , 自 适应 滤波 器 调节 使 豆 y (如 ] 最 


小 ， 也 就 是 可 (z( 扣 -zol7] 最 小 ， 杏 (7( 虽 -st))2] 也 最 小 ， 即 自 适 应 噪声 抵消 系统 的 输 


出 信和 号 光 旭 与 有 用 信号 s( 旬 的 均 方 差 最 小 。 

在 理想 情况 下 ，zo(=z( 间 ， 则 WD=s 风 ， 这 时 ， 自 适应 汪 波 器 自动 调节 其 脉冲 响应 ， 
将 cf 有 加 工 成 x 旭 ， 与 原始 输入 信号 dd 可 中 的 zx( 昌 相 减 ， 使 输出 信号 X 昌 由 于 噪声 完全 被 抵 
消 ， 而 等 于 有 用 信号 X 各 。 

可 以 证 明 ， 自 适应 汪 波 器 能 完成 上 述 任务 的 必要 条 件 为 : 参考 输入 信和 号 XD=c( 则 必须 
与 被 抵消 的 傅 号 〔 现 为 噪声 ) z( 旭 相关 。 

一 个 实际 的 噪声 抵消 系统 的 情况 比如 图 1L-1 所 示 的 还 要 复杂 一 些 ， 这 是 因为 输入 还 可 
能 有 一 些 独立 噪声 源 ， 即 与 参考 输入 无 关 的 噪声 及 干扰 ， 如 图 11-3 所 示 。 











伟 后 源 : 居 ? 











本 如 二 ) 


加 11-3 常见 的 月 适应 噪声 抵消 系统 
11.3 噪声 抵消 系统 的 MATLAB 仿真 


11.3.1  BP 网 络 模型 建立 


根据 分 析 结 论 ， 这 里 构造 一 个 1-4-1 型 BP 神经 网 络 ， 隐 含 层 结 点 取 4 个 ， 如 图 11-4 
所 示 。 


tans 膏 


图 11-4  BP 神经 网 络 模型 
本 网 络 中 的 隐 含 层 变换 函数 为 tans 这 ， 它 可 以 将 神经 元 的 输入 范围 (一 ,+eo) 映射 到 


(- 了 十 0， 是 可 徽 函 数 ， 非 常 适用 于 利用 BP 训练 的 神经 元 。 如 果 BP 网 络 的 最 后 一 层 是 
Sigmoid 型 神经 元 ， 那 么 整个 网 络 的 输出 就 会 限制 在 一 个 较 小 的 范围 内 : 如 果 是 purelin 型 
线性 神经 元 ， 则 整个 网 络 的 输出 可 为 任意 值 。 


11.3.2 ”基于 神经 网 络 工具 箱 的 BP 网 络 学 习 和 训练 





神经 了 网络 工 具 箱 为 训练 神经 网 络 提供 了 帮助 ， 可 以 利用 它 提供 的 函数 对 网 络 进行 初始 
化 、 仿 真 和 训练 ， 并 通过 变化 的 图 形 观 复 其 动态 训练 过 程 。 
如 败 11-5 所 示 ， 给 出 了 BP 神经 网 络 的 训练 过 程 。 
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TY 


调 县 是 只 醒 对 瞻 星 过 性 现 全 


图 1- 邓 古 F 覃 经 同 络 训 款 计 程 
以 下 是 MATLAB 的 实现 代码 ; 








在 这 段 程 序 中 ，BP 网 络 训练 时 ， 函 数 利用 单 层 权 值 矢量 w、 辣 值 量 b 及 转移 函数 成 批 
训练 网 络 ， 全 当 输入 B 时 ， 网 络 的 输出 为 目标 和 拓 重 tf， 在 这 个 环节 将 得 到 新 的 权 值 舌 量 ww 
和 国 值 b、 训 练 的 实际 选 代 次 数 芭 ， 以 及 记录 网 络 训练 过 程 的 误差 平方 和 行 矩 量 fr。 

误 莽 变化 蓝 妈 闸 图 11 五 所 示 ， 函 数 通 近 曲 线 嫩 图 11-7 所 未 。 
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图 1 人 .7 函 烙 逼近 昌 旺 


根据 误差 曲线 的 变化 ， 可 以 看 到 痉 过 600 志 次 训练 之 后 ， 它 最 终 通 近 于 0.01， 从 函数 
还 近 曲 线 可 看 出 输出 曲线 非常 逻 近 于 目标 曲 皮 ， 证 明 训练 后 的 网 络 具有 较 好 的 拟 介 性， 在 
本 环节 中 训练 了 网 络 并 得 到 了 构造 BP 网 络 的 基本 要 素 权 值 和 效 值 。 
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11.3.3 基于 Simulink 的 噪声 抵消 系统 设计 及 动态 仿真 


如 图 11-8 所 示 ， 是 我 们 针对 噪 声 抵消 系统 ， 建 立 的 Simulink 仿真 模型 。 可 以 发 现 ， 使 
用 Simmlink， 能 使 系统 模块 化 ， 工 作 量 大 大 减少 。 
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图 11-8 ”噪声 抵 沙 系 统 Simulink 仿真 模型 


这 里 有 个 使 用 技巧 。 在 系统 建 模 与 仿真 中 ， 会 经 常 遇 到 很 复杂 的 系统 结构 ， 难 以 用 一 
个 单一 的 模型 框图 进行 描述 通常 地 ， 需 要 将 这 样 的 框图 分 解 成 者 干 个 具有 独立 功能 的 子 
系统 ，Simulink 支持 这 样 的 子 系统 结构 。 此 外 ， 还 可 以 将 一 些 常用 的 子 系统 封装 成 为 一 些 
模块 ， 这 些 模块 的 用 法 也 类 似 于 标准 的 Simulink 模 据 ， 更 进一步 地 还 可 以 将 自己 开发 的 一 
系列 模块 做 成 自己 的 模 顽 组 或 模块 集 。 

用 通俗 的 话说 ， 就 是 在 Simulink 主 环境 下 构造 大 型 控制 系统 方 框 图 ， 如 果 把 系统 中 的 
每 个 元 件 都 显示 出 来 ， 就 会 明 到 空间 不 够 的 知 题 ， 往 往 整 整 一 屏 都 放 不 下 系统 方 框图 的 某 
个 局 部 。 解 决 这 个 问题 的 办 法 就 是 将 实现 某 一 功能 的 各 个 元 件 组 合 封装 起 来 ， 形 成 一 个 子 
系统 (Subsystem)。 如 图 11-9 所 示 的 子 模块 图 就 是 图 11-8 中 的 Atomic Subsystem 封装 的 详 
细 实 现 。 如 果 用 鼠标 双击 Subsystem 模块 ， 就 会 显示 其 基本 模型 。 

















图 11-9 BP 网 络 构造 子 模块 图 
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在 建立 了 Simulink 模型 之 后 , 我 们 就 可 以 得 到 下 面 的 结果 - 如 图 11-10 所 示 是 原始 sine 
信和 号， 如 图 11-11 所 示 是 被 随机 只 声 污 保 以 后 的 信号 ， 而 如 图 Di-12 所 示 是 经 过 嗓 声 抵消 后 
的 信和 号， 可 以 发 现 ， 经 过 神经 网 络 抵消 后 ， 噬 声 得 到 了 明显 的 抑制 ， 说 明 我 们 介绍 的 神经 
网 络 噪声 抵消 方法 是 非常 有 效 、 实 用 的 ， 
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图 11-12 ， 权 过 喝 声 抵 铺 司 的 昼 关 
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自 适 应 噪声 抵消 技术 是 一 种 能 够 很 好 地 消除 背景 噪声 影响 的 信和 号 处 理 技 术 ， 可 为 机 械 
元 件 的 噪声 、 振 动 等 动态 信号 在 测试 环境 不 太 理想 的 工作 现场 作 测 试 分 析 和 故障 诊断 提供 
了 有 效 的 方法 和 恢 据 。 

ANC 系统 的 基本 要 求 和 主要 特点 是 其 两 路 输入 噪声 必须 统计 相关 , 但 是 当 两 路 输入 虽 
声 条 是 非 线 忻 相 关 时 , 使 用 线性 的 ANC 系统 就 遇 到 了 困难 。 这 时 为 了 有 效 地 进行 噪声 抵消 ， 
就 必须 采用 自 适 庶 的 非 线 性 系统 做 滤波 器 。 神 经 网 络 是 模仿 和 延伸 人 脑 智能 、 思 维 、 意 识 
等 芒 能 的 非 线性 自 适 应 系统 ， 激 活 函 数 为 Sigmoid 的 多 层 前 向 神经 网 络 能 修 以 任意 精度 实 
现 非 线性 函数 逼近 ， 所 以 可 用 BP 神经 网 络 组 成 非 线性 自 适 应 滤波 器 。 

仿真 结果 表明 基于 BP 神经 网 络 的 噪声 抵消 能 有 效 地 清除 噪声 ， 具 有 很 好 的 鲁 棒 性 能 。 
感 兴趣 的 该 者 可 以 考虑 以 下 几 个 问题 : (1) 反 向 传播 算法 的 收 伍 速度 比较 慢 ， 一 般 需 要 成 
千 上 万 次 的 选 代 计算 ; (2)》 存在 能 量 函数 局 部 极 小 值 ; (3) 网 络 隐 含 层 神 经 元 数目 的 选取 
和 连接 权 多 初 值 的 选取 ， 往 往 要 靠 经 验 ， 针 对 上 述 问 题 ， 下 面 给 出 一 些 对 反 向 传播 算法 的 
改进 方法 。 

1、 改 进 算法 的 优化 计算 方法 


AWre = -Sa 6 
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式 中 : 
A 环 中 一 一 第 m 次 选 代 计算 时 连接 权 的 修正 值 ; 
A 页 2 一 一 前 一 次 迭代 计算 时 所 得 的 连接 权 修 正 值 ; 


4 一 一 动量 因子 ， 一 般 取 接 近 1 的 数 。 
据 有 关 文 献 介 绍 ， 了 到 1 一 42 一 0.5，a 一 0.9 一 0.98 时 ， 算 法 的 收 竹 速度 较 快 。 


确定 连接 权 修 正 值 义 丈 的 计算 过 程 ， 实 际 上 就 是 优化 计算 中 的 梯度 下 降 法 。 当 能 草 玉 
数 对 应 的 误差 晶 面 为 窗 长 型 时 ， 这 种 算法 在 谷 的 两 豆 跳 来 跳 去 ， 影 响 了 网 络 的 收敛 速度 。 
对 算法 最 普通 的 改进 方法 是 墙 加 附加 动量 项 。 

2. 改进 激 友 函数 


在 网 络 的 隐 含 屋 中 ， 神 经 元 的 激发 函数 一 般 选 取 形式 为 Sigmoid 函数 : 
1 


Te 
为 了 进一步 提高 神经 网 络 的 实用 性 ， 将 $ 型 函数 改进 为 如 下 形式 ， 
] 





上 


4 
武 中 ，a、 厂 ec 为 可 调 参数 ， 通 过 改变 系数 ae、 思 和 。 的 值 ， 改 变 了 S 型 函数 图 像 的 几何 形 
状 ， 也 就 是 改变 了 相应 神经 元 的 输入 /输出 特性 。 
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3， 调 整 网 络 的 结构 


反 向 传播 算法 对 网 络 的 结构 很 敏感 。 一 般 网 络 的 结构 是 根据 经 验 设 定 的 ， 如 果 在 网 络 
的 训练 过 程 中 ， 对 网 络 的 结构 进行 调整 ， 则 上 林 以 取得 较 好 的 结果 ， 此 外 ， 连 接 权 的 初始 值 
对 网 络 的 学 习 过 程 也 有 很 大 的 影响 ， 一 般 的 做 法 是 选取 不 同 的 连接 权 牢 始 值 对 网 络 进行 训 
练 ， 选 取 精 度 最 高 的 网 络 供 实际 使 用 。 
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